Webhooks

通过配置Webhooks, 神箭手可以将爬取的数据推送到指定地址方便用户进行后续处理. 可以设置推送新爬取的数据, 更新数据和自定义消息等. 在神箭手上使用Webhooks只需三个步骤: “登录” ——> “创建并启动爬虫” ——> “使用Webhooks”.

注意: Webhooks只会推送配置Webhooks后新爬取的数据, 更新的数据和自定义消息. 如需使用, 请在爬虫启动前或者运行过程中加配置.

步骤一 登录

点此查看详细教程.

步骤二 创建并启动爬虫

点此查看详细教程.

步骤三 使用Webhooks

1. 配置您的服务器, 接收Webhooks推送的数据, 点此查看详细教程.

2. 在采集爬虫“总览”页左侧菜单栏, 点击“Webhooks”进入设置页面.


3. 设置“Webhooks URL”, 添加“通知事件”, 包括“新增数据”, “变动数据”“自定义数据”.

注意: “新增数据”通知事件, 可以推送新爬取的数据至指定地址; “变动数据”通知事件, 可以推送旧数据更新后的数据至指定地址; “自定义数据”通知事件, 可以推送采集爬虫代码中设置的自定义消息至指定地址.


4. 点击“编辑”按钮修改Webhooks配置, 点击“测试”按钮测试配置好的Webhooks服务, 点击“删除”按钮删除不需要的Webhooks配置.


5. 查看Webhooks“推送次数统计”“推送日志”.