Webhooks推送

功能简介

Webhook是神箭手爬虫爬取到数据, 或者监控的数据有变化时, 立刻向客户服务器发送数据的异步回调. 通过配置Webhooks, 神箭手可以将爬虫爬取的数据推送到指定地址方便用户进行后续处理. 可以设置推送新爬取的数据, 更新的数据和自定义消息等.

使用图文介绍

在神箭手上使用Webhooks只需三个步骤: “登录” ——> “创建并启动爬虫” ——> “使用Webhooks”.

步骤一 登录

点此查看详细教程.

步骤二 创建并启动爬虫

点此查看详细教程.

步骤三 使用Webhooks

1. 配置您的服务器, 接收Webhooks推送的数据, 点此查看推送的数据格式.

2. 在爬虫“总览”页左侧菜单栏, 点击“Webhooks”进入设置页面.


3. 设置“Webhooks URL”, 添加“通知事件”, 包括“新增数据”, “变动数据”“自定义数据”.


4. 点击“编辑”按钮, 可修改Webhooks配置; 点击“测试”按钮, 可测试配置好的Webhooks服务能否正常发送和接收数据; 点击“删除”按钮, 可删除不需要的Webhooks配置.


5. 查看Webhooks“推送统计”“推送日志”.

注意事项

1. Webhooks只会推送配置Webhooks后新爬取的数据, 更新的数据和自定义消息. 如需使用, 请在爬虫启动前或运行过程中添加配置;

2. “新增数据”通知事件, 可以推送新爬取的数据至指定地址; “变动数据”通知事件, 可以推送旧数据更新后的数据至指定地址; “自定义数据”通知事件, 可以推送爬虫代码中设置的自定义消息至指定地址.