网络爬虫软件如何限制采集速度

马涌河畔

有些网站设置了反爬虫策略，当我们采集速度太快，就会触发反爬虫策略，然后网页弹出验证码、访问错误之类的提示信息。
集搜客新版爬虫软件如何限制采集速度呢？

内容分析应用 · 发表于 2021-4-2 09:54:52

集搜客爬虫软件有多个参数可以控制采集的速度，在爬虫群采集模式下，有这几个：批次间休息时间，网址间休息时间，并发爬虫窗口数，延迟抓取时间，是否滚屏采集

共 1 个关于本帖的回复最后回复于 2021-4-2 09:54

	B Color Image Link Quote Code Smilies 高级模式您需要登录后才可以回帖登录 \| 立即注册回帖并转播回帖后跳转到最后一页