【集微库】微博采集工具箱使用常见问题

Fuller · 发表于 2016-6-13 22:31:04

风景不在对岸发表于 2016-6-13 22:07
你好，我想请教几个问题，1.存在采集数据的时候中断，表示没人转发，问是否转发，但是不显示第几页了，请问 ...

1，你说的那种情况，采集就会中断了，这个问题没法解决，新浪微博经常出现这种情况，其实还有转发信息，只是暂时查不到了。
2，你添加的线索可能不符合要求，不同的采集工具，要求的线索是不一样的，你是用哪个工具？你添加的线索是什么？发一个出来我们看看

风景不在对岸 · 发表于 2016-6-16 08:49:18

我自己写的主题叫杨1，我看到了，添加的线索后面的格式有点不一样，谢谢~只是第一个问题，怎么解决的，就重新抓取吗？可是有的转发量很大的，重新抓取也会中断啊，需要设置速度什么的吗？设置的速度后我觉得没有什么变化，求解~

ym · 发表于 2016-6-16 10:03:02

风景不在对岸发表于 2016-6-16 08:49
我自己写的主题叫杨1，我看到了，添加的线索后面的格式有点不一样，谢谢~只是第一个问题，怎么解决的，就重 ...

微博转发或评论本来就是有限制浏览的，估计是微博的服务器负荷不了频繁的查询吧，翻页到中间就会显示没有评论之类的，这样网页结构发生变化，也就会采集失败了，无法继续了。

风景不在对岸 · 发表于 2016-6-16 15:53:03

ym 发表于 2016-6-16 10:03
微博转发或评论本来就是有限制浏览的，估计是微博的服务器负荷不了频繁的查询吧，翻页到中间就会显示没有 ...

好的，谢谢

tt75142899 · 发表于 2016-6-23 14:47:35

使用说明感觉还不够详细，要用了几次才知道怎样用

irishao · 发表于 2016-6-24 13:16:29

好好学习一下……

Melody_CC · 发表于 2016-6-29 03:29:55

呃为什么打包数据只能15条？我想要采集他所有的转发量。。这要怎么弄。。求解

Fuller · 发表于 2016-6-29 09:33:23

Melody_CC 发表于 2016-6-29 03:29
呃为什么打包数据只能15条？我想要采集他所有的转发量。。这要怎么弄。。求解 ...

你是抓取转发量？还是抓取所有转发消息？

1，DS窗口尽量最大
2，观察一下翻页过程，能翻页抓取转发吗？
3，你所用的网速怎样？抓微博消息的时候，就怕网速不够，造成翻页中断

rounanabc · 发表于 2016-6-29 15:52:51

不错，好东西

Melody_CC · 发表于 2016-6-29 23:43:52

Fuller 发表于 2016-6-29 09:33
你是抓取转发量？还是抓取所有转发消息？

1，DS窗口尽量最大

就是抓一条微博的所有转发

推荐板块

	B Color Image Link Quote Code Smilies 高级模式您需要登录后才可以回帖登录 \| 立即注册回帖并转播回帖后跳转到最后一页