你好,麻烦你帮我再看一下,规则名‘微博_热门1’,怎么爬取几秒就不爬了,而且爬取的几个文件一样            
举报 使用道具
| 回复

共 1 个关于本帖的回复 最后回复于 2018-10-11 18:34

沙发
Fuller 管理员 发表于 2018-10-11 18:34:32 | 只看该作者
在规则里定义连续滚屏,那是用来采集无没有底的瀑布流网页的,每滚一次,生成一次结果文件。但是,这个网页是有底的,用自动滚屏就行了,不要定义这个连续滚屏动作。
自动滚屏的设置方法:在DS打数机上用菜单 配置-》滚屏参数,设置 滚屏次数成>0的,比如,2,这个数字不是滚屏而是网页加载稳定以后的额外的滚屏次数。
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • HDBSCAN的min_samples和min_cluster_size参
  • 为什么BERTopic话题缩减后特征词出现大量没
  • GooSeeker分词扩展模块的安装方法
  • BERTopic做主题合并以后为什么得到的实际主
  • 怎样使用BERTopic做话题检测和主题聚类

热门用户

GMT+8, 2026-6-17 13:15