新浪微博去采集数据,结果就只抓了两页,后面就不抓了。这是怎么回事呢?纯小白求指导
举报 使用道具
| 回复

共 3 个关于本帖的回复 最后回复于 2016-5-5 09:41

沙发
Fuller 管理员 发表于 2016-5-4 22:31:03 | 只看该作者
使用微博采集工具箱吗? http://www.gooseeker.com/land/weibo.html

要采集微博的什么信息?这是翻页规则适应性不够
举报 使用道具
板凳
phoebeyuting 初级会员 发表于 2016-5-5 08:40:15 | 只看该作者
Fuller 发表于 2016-5-4 22:31
使用微博采集工具箱吗? http://www.gooseeker.com/land/weibo.html

要采集微博的什么信息?这是翻页规则 ...

采集的是微博的博文、发表时间、评论数和转载数。但是现在是翻页不一定。。试了几次,有的是翻了两页就不能再抓数据,有的是翻了五六页不能抓了。。不懂怎么回事。。。
举报 使用道具
地板
Fuller 管理员 发表于 2016-5-5 09:41:04 | 只看该作者
phoebeyuting 发表于 2016-5-5 08:40
采集的是微博的博文、发表时间、评论数和转载数。但是现在是翻页不一定。。试了几次,有的是翻了两页就不 ...

这种现象的话,从以下方面检查:
1,DS打数机的滚屏功能一定要打开,菜单 配置-》滚屏参数,滚屏次数要大于0
2,不要设置定时器触发,也是DS菜单 配置 下面的
3,不要修改超时时长,或者可以改成更长的值
4,网速要好

失败以后有没有看到日志窗口中的信息?可以截个图
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-4-20 03:49