微博内容抓取疑问

加为好友

在抓取的过程中，微博内容太长导致页面显示“展开全文”，最后的数据中也有这几个字，如何才能把微博内容全部抓取呢？

Fuller · 发表于 2017-12-12 20:43:22

微博工具箱原先设计的时候没有打算抓取需要展开的内容。我问问研发有没有增加这个内容抓取的计划。如果不行的话，需要自己做采集规则

18759281221 · 发表于 2017-12-12 20:46:16

Fuller 发表于 2017-12-12 20:43
微博工具箱原先设计的时候没有打算抓取需要展开的内容。我问问研发有没有增加这个内容抓取的计划。如果不行 ...

哦哦，这样，多谢

shenzhenuser1 · 发表于 2017-12-13 11:42:37

采集微博全文的工具现在已经增加，将有“展开全文”内容的博文筛选出来后，找到对应的博文独立链接，添加到微博博文展开全部采集中，就可以将完整的微博采集下来

18759281221 · 发表于 2017-12-13 16:31:22

wangyong 发表于 2017-12-13 11:42
采集微博全文的工具现在已经增加，将有“展开全文”内容的博文筛选出来后，找到对应的博文独立链接，添加到 ...

多谢，我现在去试试看

共 4 个关于本帖的回复最后回复于 2017-12-13 16:31

	B Color Image Link Quote Code Smilies 高级模式您需要登录后才可以回帖登录 \| 立即注册回帖并转播回帖后跳转到最后一页