集搜客GooSeeker网络爬虫

标题: 只看到线索编号,怎么找地址呢 [打印本页]

作者: gooseeker_info    时间: 2016-11-2 15:29
标题: 只看到线索编号,怎么找地址呢
如题,看到DS打数机抓取失败了,看到了线索编号,不知道是哪个网址失败了


作者: Fuller    时间: 2016-11-2 15:30
拿着线索编号,进入MS谋数台,菜单 工具-》加载规则-》按线索号。就能看到这个网址以及网页内容
作者: xandy    时间: 2016-11-2 15:33
可能是抓太快了,在会员中心设置调度参数,用爬虫群模式,可以慢慢抓。
作者: Fuller    时间: 2016-11-2 17:09
[attach]2210[/attach]

最重要的是这两个参数,这是每抓一个线索等待的时间。上图表示等待时间是5~10秒的一个随机值,所以,前一个值一定要小于后一个值






欢迎光临 集搜客GooSeeker网络爬虫 (http://www.gooseeker.com/doc/) Powered by Discuz! X3.2