11#
Fuller 管理员 发表于 2018-5-14 20:14:26 | 只看该作者
我发现了爬虫程序的一个bug,会影响到滚屏的数量,不过你设置成-1,就是无限滚屏,影响不会太大,但是,最好避免一下吧


如果你设置 “每次滚屏数”,会造成高级设置里面的“跨度”跟“每次滚屏数”联动设置,如果每次滚屏数设置成10,跨度也变成了10,这样会影响滚屏次数的准确计算。我测试了,对于你把滚屏次数设置成-1来说,影响不大

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
12#
吴力 新手上路 发表于 2018-5-15 00:29:37 | 只看该作者
Fuller 发表于 2018-5-14 20:14
我发现了爬虫程序的一个bug,会影响到滚屏的数量,不过你设置成-1,就是无限滚屏,影响不会太大,但是,最 ...

把DS打数机滚屏参数-次数改0真的直接采集不到??为什么呢??
举报 使用道具
13#
Fuller 管理员 发表于 2018-5-15 09:05:03 | 只看该作者
你采集的内容是不是不在首页?而是在其他的列表页?这个网站首次加载的时候,一定会进入首页,需要做一个点击动作或者用爬虫路线切换到列表页,否则日志中会显示超时失败。可以参照个教程:https://www.gooseeker.com/doc/article-150-1.html
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 将文本聚类和LDA分析模块安装在数据盘上的
  • GooSeeker分词软件的tf-idf算法和特征词选
  • 边表格式和矩阵格式的共词矩阵表有什么区别
  • GooSeeker分词、情感分析和文本分析平台简
  • 聚类分析和主题分析中的特征选择参数的设置

热门用户

GMT+8, 2026-3-22 23:36