新浪微博_评论抓取规则发布了，欢迎下载使用

微博评论显示1200条，实际采集不到500条，请问这个问题该怎么处理啊？

青椒美美 发表于 2023-3-23 20:01
微博评论显示1200条，实际采集不到500条，请问这个问题该怎么处理啊？

微博网站能够浏览的评论可能只是部分，比如虽然看到评论数上万，可是能够实际浏览的可能不到千条；
而且，weibo评论是瀑布流，不是翻页，很难说能采集多少。

要想尽量采集的多，有以下建议：

1.爬微博之前，一定要在集搜客浏览器登陆微博
2.网速要好，网速好，才能及时加载网页，把评论加载出来
3.计算机处理速度要快，这样才能及时把评论网页加载出来
4.采集量大了，要及时清缓存