快捷导航
5 301

爬取数据经常卡住SFILE

mikejnp1 于 2020-5-16 10:00 发表 [复制链接]
RT 又要爬取翻页网址不变的数据,有什么办法从卡住的那里往后继续爬吗?
举报 使用道具
| 回复

共 5 个关于本帖的回复 最后回复于 2020-5-16 16:18

Fuller 管理员 发表于 2020-5-16 11:26:29 | 显示全部楼层
把你做的规则名字发出来,管理员帮你诊断一下
举报 使用道具
mikejnp1 初级会员 发表于 2020-5-16 13:36:29 | 显示全部楼层
微信图片_20200516133429.png
名称:大连理工
想爬大工老师的简历地址,有时就会卡住SFILE
举报 使用道具
mikejnp1 初级会员 发表于 2020-5-16 13:37:06 | 显示全部楼层
Fuller 发表于 2020-5-16 11:26
把你做的规则名字发出来,管理员帮你诊断一下

名称:大连理工
举报 使用道具
Fuller 管理员 发表于 2020-5-16 16:14:24 | 显示全部楼层

两级规则我都看了,没有问题。

你这是第一次运行爬虫?以前从来没有爬过数据?如果停在SFILE状态,应该是存文件出错了,很可能没有文件的操作权限。请做如下检查:

1,在DS打数机上选择菜单 文件-》存储路径,看看存在什么位置,换一个位置试试,不要放在桌面上,而是放在数据盘或者当前登录用户的工作目录中。
2,是不是运行了360这样的软件,他们可能阻止了写文件。把他们关了试试
举报 使用道具
mikejnp1 初级会员 发表于 2020-5-16 16:18:33 | 显示全部楼层
Fuller 发表于 2020-5-16 16:14
两级规则我都看了,没有问题。

你这是第一次运行爬虫?以前从来没有爬过数据?如果停在SFILE状态,应该 ...

好的,谢谢
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 数据管家和集搜客网络爬虫超出配额是怎么回
  • 用GooSeeker数据管家能采集微博内容吗?
  • 怎样使用GooSeeker数据管家启动采集任务?
  • GooSeeker数据管家软件使用指导
  • 如何使用集搜客分词平台做社会网络图分析?

热门用户

GMT+8, 2020-8-15 06:11