本帖最后由 ym 于 2016-2-1 18:08 编辑

常见问题 > 制作规则—常见问题导航 > 翻页采集 > 怎么控制翻页数量

怎么规定抓取翻页数
举报 使用道具
| 回复

共 1 个关于本帖的回复 最后回复于 2015-12-25 16:33

沙发
shenzhenuser1 版主 发表于 2015-12-25 16:33:24 | 只看该作者
本帖最后由 ym 于 2016-5-24 11:39 编辑

使用爬虫群进行采集,参看教程:如何运行爬虫群
爬虫群介绍看爬虫群模式,高效便捷的采集方式

用了爬虫群,就可以在规则的调度里用“同一线索内翻页次数”来控制翻页数量,我们填的是n,实际翻页数是n+1
注意:调度参数只对爬虫群窗口生效,对手工运行的DS窗口不生效,所以只能通过爬虫群采集来控制翻页数量。

各个调度参数的意义看这里http://www.gooseeker.com/doc/article-112-1.html



本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 怎样设置LDA模型的超参数alpha(α)和beta(
  • LDA主题分析模型到底是什么?
  • top2vec话题发现原理和使用方法
  • 将文本聚类和LDA分析模块安装在数据盘上的
  • GooSeeker分词软件的tf-idf算法和特征词选

热门用户

GMT+8, 2026-4-20 04:53