5 7269

爬取数据经常卡住SFILE

mikejnp1 于 2020-5-16 10:00 发表 [复制链接]
RT 又要爬取翻页网址不变的数据,有什么办法从卡住的那里往后继续爬吗?
举报 使用道具
| 回复

共 5 个关于本帖的回复 最后回复于 2020-5-16 16:18

Fuller 管理员 发表于 2020-5-16 11:26:29 | 显示全部楼层
把你做的规则名字发出来,管理员帮你诊断一下
举报 使用道具
mikejnp1 初级会员 发表于 2020-5-16 13:36:29 | 显示全部楼层

名称:大连理工
想爬大工老师的简历地址,有时就会卡住SFILE

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
mikejnp1 初级会员 发表于 2020-5-16 13:37:06 | 显示全部楼层
Fuller 发表于 2020-5-16 11:26
把你做的规则名字发出来,管理员帮你诊断一下

名称:大连理工
举报 使用道具
Fuller 管理员 发表于 2020-5-16 16:14:24 | 显示全部楼层

两级规则我都看了,没有问题。

你这是第一次运行爬虫?以前从来没有爬过数据?如果停在SFILE状态,应该是存文件出错了,很可能没有文件的操作权限。请做如下检查:

1,在DS打数机上选择菜单 文件-》存储路径,看看存在什么位置,换一个位置试试,不要放在桌面上,而是放在数据盘或者当前登录用户的工作目录中。
2,是不是运行了360这样的软件,他们可能阻止了写文件。把他们关了试试
举报 使用道具
mikejnp1 初级会员 发表于 2020-5-16 16:18:33 | 显示全部楼层
Fuller 发表于 2020-5-16 16:14
两级规则我都看了,没有问题。

你这是第一次运行爬虫?以前从来没有爬过数据?如果停在SFILE状态,应该 ...

好的,谢谢
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 利用AI阅读和分析文本:扣子COZE记录用户反
  • 在网页片段内直观标注——以B站评论采集为
  • 利用AI阅读和分析文本:使用COZE建设游记文
  • 使用AI工具Kimi生成python代码为文本分析结
  • 苹果mac电脑安装集搜客网络爬虫软件失败的

热门用户

GMT+8, 2024-10-7 01:22