有配置爬虫群的么?我配置了10个爬虫,但是,由于页面是动态页面,多个爬虫抓取的时候页面还没加载完就直接跳过抓取下一条了 = =没有爬虫却抓的好好的    为什么

举报 使用道具
| 回复

共 1 个关于本帖的回复 最后回复于 2016-11-9 11:35

沙发
xandy 论坛元老 发表于 2016-11-9 11:35:09 | 只看该作者
有可能是滚屏太快了,试下将滚屏参数调小点。
滚屏参数了解参看:《集搜客GooSeeker专有名词解释—滚屏参数
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-5-2 20:26