【集微库】微博采集工具箱使用常见问题

Fuller · 发表于 2018-1-25 09:07:33

chinafree 发表于 2018-1-25 01:54
第五页之后的数据怎么采？

粉丝第五页之后的采集不到

数据集 · 发表于 2018-1-25 09:08:25

本帖最后由数据集于 2018-1-25 09:11 编辑

chinafree 发表于 2018-1-25 01:54
第五页之后的数据怎么采？

把第五页的网址添加到微博工具箱启动采集，就会从第五页开始采集。如果微博上只显示前5页，那就只能采集前五页。

AMBERRR · 发表于 2018-2-2 10:51:12

微博阅读可以爬取吗？

Fuller · 发表于 2018-2-2 11:34:41

AMBERRR 发表于 2018-2-2 10:51
微博阅读可以爬取吗？

是否能够采集，只需用GS浏览器验证一下：
1，加载目标网页
2，点击工具条上的“定义规则”，进入定义规则模式
3，点击网页上的内容，看看DOM是否能定位到，看看DOM节点内容能否显示出来
能显示出来，就能采集

思秋忆 · 发表于 2018-2-5 11:35:41

javyru · 发表于 2018-2-7 00:41:48

为什么每次只有20条数据啊？

Fuller · 发表于 2018-2-7 08:10:01

javyru 发表于 2018-2-7 00:41
为什么每次只有20条数据啊？

似乎是没有登录微博，先在GS浏览器中登录微博

louiselana · 发表于 2018-2-28 16:41:20

关键词搜索功能很实用，但总是抓取到一半（大约30页）就崩溃了。可以完善以下吗？

数据集 · 发表于 2018-2-28 17:41:26

louiselana 发表于 2018-2-28 16:41
关键词搜索功能很实用，但总是抓取到一半（大约30页）就崩溃了。可以完善以下吗？ ...

崩溃了有什么提示？是未响应吗？

15509501850 · 发表于 2018-3-1 21:29:50

怎么停止

推荐板块

	B Color Image Link Quote Code Smilies 高级模式您需要登录后才可以回帖登录 \| 立即注册回帖并转播回帖后跳转到最后一页