触发 scraper 以进行批量采集

触发 scraper 以进行批量采集

POST /dca/trigger

cURL

cURL

curl --request POST \
  --url https://api.brightdata.com/dca/trigger \
  --header 'Authorization: Bearer <token>' \
  --header 'Content-Type: application/json' \
  --data '
[
  {
    "url": "https://targetwebsite.com/product_id/"
  }
]
'

200

{
  "collection_id": "ID_DATASET",
  "start_eta": "2021-11-07T13:26:22.702Z"
}

授权

Authorization · string · header · 必填

在 Authorization 头中使用您的 Bright Data API Key 作为 Bearer token。

认证方法:

1. 从 Bright Data 账户设置获取您的 API Key: https://brightdata.com/cp/setting/users
2. 在请求的 Authorization 头中包含 API Key
3. 格式: Authorization: Bearer YOUR_API_KEY

示例:

Authorization: Bearer b5648e1096c6442f60a6c4bbbe73f8d2234d3d8324554bd6a7ec8f3f251f07df

了解如何获取 Bright Data API Key: https://docs.brightdata.com/cn/api-reference/authentication#如何生成新的-api-key？

查询参数

collector · string · 必填

scraper 的唯一标识

version · string

设置为 dev 以触发 scraper 的开发版本

name · string

human_name - 批处理的可读名称

queue_next · integer · 默认值: 1

如果抓取队列中已有任务，将此任务加入队列

queue · string

发送另一个批次的请求，该批次将在上一个完成后启动

confirm_cancel · integer · 默认值: 1

取消正在运行的任务并替换运行，提交请求后取消当前任务

no_downloads · integer · 默认值: 1

禁用媒体文件下载

deadline · string

设置任务截止时间，超过指定时间任务将被终止。h 表示小时，m 表示分钟，s 表示秒。

请求体

application/json

url · string<uri>

响应

200 - application/json

OK