微博如何定义采集规则爬取博文的全部内容？

zhangfg123456

有的微博博文比较长（但是这种的数量也比较少），要点开之后才能看到全文。
需要设置层级进行爬取吗？但是有的微博又没有“展开全文”的链接，这样会影响吗？如何能在成功爬取的条件下，使得爬虫的速度比较快呢？快捷采集能解决这一问题吗？

Fuller · 发表于 2021-4-2 07:46:25

将采下来的数据导出成excel格式，在excel中可以很容易地过滤出含有“展开全文”的微博，把这些微博的网址拷贝出来，放入微博博文展开全部采集这个快捷采集工具中再采集一遍

共 1 个关于本帖的回复最后回复于 2021-4-2 07:46

	B Color Image Link Quote Code Smilies 高级模式您需要登录后才可以回帖登录 \| 立即注册回帖并转播回帖后跳转到最后一页