快捷导航
集搜客网络爬虫采集新浪微博评论的时候,如果在翻页过程中突然不显示微博评论,那是网络速度太慢或者微博网址反应太慢。但是,爬虫会一直在等,等很久很久都不结束,这是网络爬虫软件的一个bug。

2020年2月11日发布的V9.0.5版本解决了这个bug,请下载最新版本,提高采集速度。

下图是引起挂起的情况,可以看到网页上的进度标志一直旋转,就是不显示评论内容,有时候直接显示“没有评论”
微博评论20200211160814.png
举报 使用道具
| 回复

共 0 个关于本帖的回复 最后回复于 2020-2-11 16:16

您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 关于食品安全的美国联邦法规文件的网络爬虫
  • 怎样更有效率地搜索互联网和整理知识—使用
  • 阿里巴巴外包询价网站用集搜客网络爬虫能采
  • 在限定论域的时候,为什么“任何一个”表示
  • 数理逻辑是讲什么的?

热门用户

GMT+8, 2020-3-29 11:47