为您找到29个关于"节点"的结果
节点-什么是节点

神箭手的应用是运行在云服务器集群上的,节点表示运行神箭手应用的最小计算单元,您可以通过增减节点控制应用的运行速度;比如每个爬虫或者清洗应用的运行,都需要占用至少一个节点(定时休息中的应用也需要占用节点);运行一个应用的节点越多,速

节点-节点有什么作用

对于爬虫、清洗、人工智能应用等,节点越多,应用运行速度越快。对于免费API接口,总节点数会影响调用频率和并发数:API接口种类调用频率并发数免费API(包括自行开发的)每秒”节点数x2”次,换算成“多少毫秒可调用一次”;如果共有5个节点

节点-节点的费用

免费赠送一个普通节点。不同等级的套餐,赠送的节点数不同:套餐等级免费赠送个人免费版1个普通节点个人专业版1个普通节点个人旗舰版3个普通节点企业标准版8个普通节点企业高级版20个普通节点企业定制版不同配

节点-运行时增减节点

启动爬虫或清洗等应用后,您可以在应用总览页面随时增加或减少节点。此外,也可以通过RESTful接口不登录神箭手,增减节点数量。

修改爬虫节点-接口说明

此接口用于修改采集爬虫节点个数,请求地址如下所示:"https://www.shenjian.io/rest/crawler/changeNode"HTTP请求方式:GETHTTP请求url:https://www

修改爬虫节点-请求参数说明

参数是否必填说明crawler_id是爬虫IDnode_delta是整型,大于0表示增加节点,小于0表示减少节点,等于0不做任何操作点此查看返回参数说明,返回码对照表,爬虫状态码对照表,接口调用成功示栗

爬虫接口-修改爬虫节点

{"code":0,"reason":"请求成功","data":{"node_running":2,"node_left":18}}

神箭手平台相关常见问题-Q-节点是什么

节点是运行神箭手应用的最小计算单元;比如每个爬虫或者清洗应用的运行,都需要占用至少一个节点(定时休息的应用也需要占用节点);运行一个应用的节点越多,速度越快;一个应用运行完成,其占用的节点也会被自动释

回调函数-initCrawl

msite内置对象,参考内置对象site爬虫初始化的时候被调用,多节点运行时,只在第一个节点(又称主节点)中被调用,其他节点等待主节点的initCrawl方法执行完之后才继续往下执行。建议在此回调中做添加入口页的操作。

system对象-exit

于在爬虫初始化时检查必要的参数或者爬虫运行的必要条件。注意:多节点情况下,调用此函数的节点会立即停止,但是不会影响其他节点。只有当所有节点都停止之后,爬虫状态才会变成停止。