请问如何设置参数,可以让爬取的速度加快,现在有点慢,滚屏参数是2,要怎么设置才能更快呢?
举报 使用道具
| 回复

共 2 个关于本帖的回复 最后回复于 2018-5-31 18:49

沙发
shengchengx 金牌会员 发表于 2018-5-31 18:37:39 | 只看该作者
滚屏速度为0能滚屏,只是速度没有变。1和-1速度也不变,2,3,4,5,6,....速度越来越快。-2,-3,-4,-5,.....速度越来越慢
可以使用爬虫群开启多个窗口进行采集
举报 使用道具
板凳
Fuller 管理员 发表于 2018-5-31 18:49:14 | 只看该作者
这里有一篇专门讨论帖《怎样提高抓取速度
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 为BERTopic安装需要的预训练SBERT模型
  • 在什么情况下使用弹窗模式和回退功能?
  • 爬网址做层级采集——以当当商品爬虫为例
  • 网络爬虫采集列表数据
  • UMAP的min_dist参数有什么作用?

热门用户

GMT+8, 2026-7-21 03:09