快捷导航
常见问题 > 采集数据—常见问题导航 > 设置采集速度 > 利用集搜按钮实现并发采集,加快采集速度

PS:从V5.6.0版本爬虫以来,增加了爬虫群功能,支持并发运行多个爬虫窗口,这样比下面讲的集搜更加灵活

点击集搜按钮可以并行开启一个新的打数机窗口进行采集,当将一个规则已经开启一个集搜客窗口时,可在打数机内输入新的规则主题名搜索后并行开启一个新的集搜窗口,实现多规则并行采集加快采集速度。搜索框最多显示20个规则,这样,最多开启20个集搜窗口
QQ截图20151030141243.png
注意:集搜窗口是有序号,与搜索结果中规则的次序是对应的,序号0的集搜窗口只会采搜索结果里排第一个的规则,序号1采排第二的规则,依此类推。如果一开始打开了第一个规则的集搜窗口,后面重新搜索了另一个规则,并且排在第一个,点击集搜时,序号0集搜窗口的采集任务就会被换成后面的那个规则了。
QQ截图20151030141541.png
举报 使用道具
| 回复

共 1 个关于本帖的回复 最后回复于 2015-10-21 17:38

您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 定位映射提高网页采集精度——以B站视频采
  • 如何管理网络爬虫的线索
  • 网络爬虫生成的XML格式结果文件
  • 打包下载excel格式的数据
  • 爬网址做层级采集——以京东商品爬虫为例

热门用户

GMT+8, 2020-12-1 17:21