1 9608

规则爬取老断

zhenghy 于 2018-10-11 17:24 发表 [复制链接]
你好,麻烦你帮我再看一下,规则名‘微博_热门1’,怎么爬取几秒就不爬了,而且爬取的几个文件一样            
举报 使用道具
| 回复

共 1 个关于本帖的回复 最后回复于 2018-10-11 18:34

Fuller 管理员 发表于 2018-10-11 18:34:32 | 显示全部楼层
在规则里定义连续滚屏,那是用来采集无没有底的瀑布流网页的,每滚一次,生成一次结果文件。但是,这个网页是有底的,用自动滚屏就行了,不要定义这个连续滚屏动作。
自动滚屏的设置方法:在DS打数机上用菜单 配置-》滚屏参数,设置 滚屏次数成>0的,比如,2,这个数字不是滚屏而是网页加载稳定以后的额外的滚屏次数。
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-4-18 18:34