在会员中心看到有调度这个功能,但是到处都没找到调度是什么东西,有什么作用,有没有大神帮忙详细解释一下
举报 使用道具
| 回复

共 2 个关于本帖的回复 最后回复于 2016-11-14 19:53

沙发
shenzhenwan10 金牌会员 发表于 2016-11-14 17:49:47 | 只看该作者
调度的含义就是配置爬虫群,可以看这篇关于爬虫群的文档: http://www.gooseeker.com/doc/article-200-1.html
举报 使用道具
板凳
gooseeker_info 金牌会员 发表于 2016-11-14 19:53:40 | 只看该作者
所谓的调度,就是给他安排运行时间,以及运行时一些配置参数。

如果只做了一个规则,直接用DS打数机的单搜功能就够了。如果有很多规则,而且还在不断地做新规则,调度就有用了。

先把爬虫群运行起来,比如,运行4个爬虫群窗口。那么接下来,就不用再去点击“单搜”按钮了。只管用MS谋数台做规则,做好规则就设置调度参数。不用再操心运行爬虫问题。

假设有很多规则要做,这样只管做规则,效率就会很高,一天下来,到会员中心的数据管理版块去下载数据就行了
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-5-5 19:57