爬取时窗口显示加载失败导致抓取失败

数据爬取时，窗口显示的网页加载失败就会导致抓取失败，而退出此次运行重新抓取又可以，但是抓两条线索以后又会重复同样的情况这是什么原因，感谢大佬
！！

我在回答你另一个帖子的时候，发现你做的规则的样本页面很难加载，可能是网站有问题，对于这种网站，采集一遍以后，会有很多失败的网页，激活失败再重新采集，经过几轮以后，还是可以把所有采集下来的

Fuller 发表于 2019-7-29 22:10
我在回答你另一个帖子的时候，发现你做的规则的样本页面很难加载，可能是网站有问题，对于这种网站，采集一 ...

好的，我多试一下，确实是有这样的问题，前边出错然后重新加载就好了  但是最多爬几个就会出现新的错误

holamonica 发表于 2019-7-30 08:21
好的，我多试一下，确实是有这样的问题，前边出错然后重新加载就好了  但是最多爬几个就会出现新的错误

...

规则里面尽量用上定位标志映射，增加规则的适应性

Fuller 发表于 2019-7-30 09:02
规则里面尽量用上定位标志映射，增加规则的适应性

那个页面您应该看过了，该加的都差不多了，然后我把绝对定位也改了，但是还是很容易出现问题

holamonica 发表于 2019-7-30 09:24
那个页面您应该看过了，该加的都差不多了，然后我把绝对定位也改了，但是还是很容易出现问题
...

一般不要用绝对定位。出问题的任务名是什么？

Fuller 发表于 2019-7-30 10:20
一般不要用绝对定位。出问题的任务名是什么？

任务名  ：科惠网科技成果资源与环境数据爬取下级数据    还是跟昨天一样地问题    爬取会有加载不出页面然后就失败了，  我还多任务都是这个类似的 ，然后因为这个原因每天爬不到1000条，都快凉了