问:爬虫调度怎样使用?
是不是点击规则那个 三角形按钮就可以按照网址线索开始采集数据并保存到服务器?


答:怎样运行爬虫群,请看这个文档:http://www.gooseeker.com/doc/article-200-1.html
爬虫群的原理说明,请看这个文档:http://www.gooseeker.com/doc/article-197-1.html

那个三角按钮不是用来运行爬虫的,而是用来控制是否向爬虫发任务。

上图状态表示处于正常调度状态,只要有线索可用,服务器的调度池就会向爬虫发抓取任务。


上图状态表示暂停发任务


本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
| 回复

共 0 个关于本帖的回复 最后回复于 2015-12-20 17:31

您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 爬网址做层级采集——以当当商品爬虫为例
  • 网络爬虫采集列表数据
  • UMAP的min_dist参数有什么作用?
  • UMAP的n_neighbors参数有什么作用?
  • HDBSCAN的min_samples和min_cluster_size参

热门用户

GMT+8, 2026-7-2 11:55