https://www.zglnrc.org.cn/#/jobs
举报 使用道具
| 回复

共 3 个关于本帖的回复 最后回复于 2023-12-15 16:51

沙发
Fuller 管理员 发表于 2023-12-15 16:41:20 | 只看该作者
在chrome浏览器中能不能打开?如果不能在爬虫浏览器中打开,但是可以在chrome中打开,那么说明这个网站把爬虫封锁了。如果连chrome都打不开了,说明把你的帐号或者ip都封锁了
举报 使用道具
板凳
zhangrui111 新手上路 发表于 2023-12-15 16:43:50 | 只看该作者
在chrome可以打开,就是在爬虫浏览器一直打圈打不开,是不是我就不能在这个网址上爬取信息了?
举报 使用道具
地板
Fuller 管理员 发表于 2023-12-15 16:51:05 | 只看该作者
zhangrui111 发表于 2023-12-15 16:43
在chrome可以打开,就是在爬虫浏览器一直打圈打不开,是不是我就不能在这个网址上爬取信息了? ...


清缓存也许能缓解一下,但是,基本上不能连续爬这类网站了

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 为BERTopic安装需要的预训练SBERT模型
  • 在什么情况下使用弹窗模式和回退功能?
  • 爬网址做层级采集——以当当商品爬虫为例
  • 网络爬虫采集列表数据
  • UMAP的min_dist参数有什么作用?

热门用户

GMT+8, 2026-9-16 23:32