【集微库】微博采集工具箱使用常见问题

wanhanwen · 发表于 2024-5-12 00:05:57

为什么我要采集三千多条数据，采集时每次只能20条，下载也是每次只有20条？

wanhanwen · 发表于 2024-5-12 00:10:36

您好我想问下在博主详细信息里，每次只能采集20条线索吗？能不能直接导出全部的

Fuller · 发表于 2024-5-12 07:54:42

wanhanwen 发表于 2024-5-12 00:10
您好我想问下在博主详细信息里，每次只能采集20条线索吗？能不能直接导出全部的 ...

爬虫要一批一批地采集，为了防止被封锁，每一批之间会有短暂的停歇。你可以等所有批次都采集完了再导出

jimjimjim · 发表于 2024-6-25 21:44:18

微博采集少了很多条啊

Fuller · 发表于 2024-6-25 23:01:53

jimjimjim 发表于 2024-6-25 21:44
微博采集少了很多条啊

建议在微博cn端采集博主主页，可以采集全。

曾看青春闪烁 · 发表于 2024-8-7 14:58:27

为什么最终的数据没有所在地呀？

gz51837844 · 发表于 2024-8-8 17:15:06

曾看青春闪烁发表于 2024-8-7 14:58
为什么最终的数据没有所在地呀？

通过微博搜索或者粉丝工具获取的微博用户资料，不包含用户的IP属地信息，因为搜索页面或者粉丝页面没有显示这个属性，可以进一步采集博主详细资料获取IP属地信息。
把获取到的博主主页网址添加到这个快捷采集：微博博主资料抓取_快捷采集，采集完成后，导出的数据会包含IP属地信息

22wangxu10 · 发表于 2024-8-11 14:55:05

您好，为什么在微博上面看评论有1.5万，结果爬下来只爬到了116条评论呀？

Fuller · 发表于 2024-8-11 18:09:35

22wangxu10 发表于 2024-8-11 14:55
您好，为什么在微博上面看评论有1.5万，结果爬下来只爬到了116条评论呀？

微博网站上很可能只能看到这么多评论，你可以手工滚动网页试试。

1finite_seeker · 发表于 2024-10-19 22:29:30

长度超过140的微博没有采集全怎么办

推荐板块

	B Color Image Link Quote Code Smilies 高级模式您需要登录后才可以回帖登录 \| 立即注册回帖并转播回帖后跳转到最后一页