刚开始还可以抓取,之后发现被封IP了,怎么处理?
举报 使用道具
| 回复

共 4 个关于本帖的回复 最后回复于 2017-9-4 16:00

沙发
zhu369 新手上路 发表于 2017-8-30 15:39:10 | 只看该作者
本帖最后由 zhu369 于 2017-8-30 15:41 编辑

如果电脑是通过ADSL或者光线接入的,使用了动态IP地址,可以重启猫,换IP地址,然后清理cookie,重新运行浏览器你的集搜客网络爬虫是火狐插件版还是GS爬虫浏览器版?两个版本的清理方法是不一样的。

举报 使用道具
板凳
shengchengx 金牌会员 发表于 2017-8-30 15:39:32 | 只看该作者
本帖最后由 shengchengx 于 2017-8-30 15:41 编辑

封ip的话只能进行更换ip了,采集数据的时候需要控制采集的速度和采集的频率,经常清理一下浏览器的cookie。
《如何更换ip地址?》这个教程是教怎么更换ip的。
举报 使用道具
地板
炳嘉 新手上路 发表于 2017-9-4 16:00:39 | 只看该作者
一些网站反爬时会封ip,我以前也遇到过,后来我用代理云的IP就好了
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • BERTopic做主题合并以后为什么得到的实际主
  • 怎样使用BERTopic做话题检测和主题聚类
  • 什么是SBERT
  • 怎样让GooSeeker分词工具使用宋体画词云图
  • 使用BERTopic时遇到的c-TF-IDF是什么?

热门用户

GMT+8, 2026-6-13 16:29