快捷导航

调度设置参数说明

2019-5-23 19:04| 发布者: ym| 查看: 361| 评论: 0

摘要: 很多用户会用爬虫群来实现自动采集入库,可能有些参数用得不对,就会造成采集效果不太好的情况。如果一开始不太清楚每个参数怎么设置的情况下,可以先不做修改直接点击确认,因为每一个参数都会有默认值,这些默认值 ...

注:集搜客GooSeeker爬虫从V9.0.2版本开始,爬虫术语“主题”统一改为“任务”,在爬虫浏览器里先命名任务再创建规则,然后登录集搜客官网会员中心的“任务管理”里,就可以查看任务的采集执行情况、管理线索网址以及做调度设置了。

很多用户会用爬虫群来实现自动采集入库,可能有些参数用得不对,就会造成采集效果不太好的情况。如果一开始不太清楚每个参数怎么设置的情况下,可以先不做修改直接点击确认,因为每一个参数都会有默认值,这些默认值对大部分网页是通用的,如果要修改可以查阅《调度设置操作介绍》。后面发现采集数据不完整或遇到反爬或需要额外调整的情况,可以重新修改参数值。下面汇总了调度设置参数的介绍,希望大家可以用好调度设置功能。

其实采集设置里有些参数,比如超时时长、延迟抓取、滚屏采集等,是跟DS打数机菜单里的功能项有对应的,所以在测试采集完成后,大家可以根据DS打数机的配置菜单或高级设置菜单所设定的参数,再来填写调度设置的相关参数。


鲜花

握手

雷人

路过

鸡蛋

最新评论

集搜客GooSeeker网络爬虫 ( 粤ICP备11065265号-2 )

GMT+8, 2019-6-18 20:41