采集老是出现这种白色页面

何波波

用GS浏览器采集老是出现这种空白页面，如图；

何波波 · 发表于 2016-11-18 17:32:15

这种情况是因为抓取太快，可以在会员中心爬虫群设置，调度爬虫参数，减缓抓取速度。

gooseeker_info · 发表于 2016-11-18 18:40:57

如果抓取太快，很可能会触发对方网站的反爬机制。一开始可以爬的快一些，如果触发了反爬，就要调整调度参数，把速度降下来。可以参看这里一个完整的教程《抓取网页信息太快造成封IP怎么办》

管理清理cookie和缓存的另一个帖子《一直登录不了微博关键词搜索工具》

共 2 个关于本帖的回复最后回复于 2016-11-18 18:40

	B Color Image Link Quote Code Smilies 高级模式您需要登录后才可以回帖登录 \| 立即注册回帖并转播回帖后跳转到最后一页