二级任务采集很多失败，帮忙指点

tangtang1234

任务名：买树苗供应二级

Fuller · 发表于 2021-12-20 15:12:33

把失败的网址发出来一些我测试一下

Fuller · 发表于 2021-12-20 15:17:16

这个样本页面是vip的，用了一个特殊的class，很可能其他类型的网页有其他class，要对照一下，想想应对方法。其中一种方法是针对不同网页定义不同的采集规则，这些采集规则的任务名字一样，规则编号不一样，爬虫运行的时候会自动找到合适的一个

tangtang1234 · 发表于 2021-12-20 15:22:18

Fuller 发表于 2021-12-20 15:17
这个样本页面是vip的，用了一个特殊的class，很可能其他类型的网页有其他class，要对照一下，想想应对方法 ...

https://www.maishumiao.cn/gongying/show-13824.htmlhttps://www.maishumiao.cn/gongying/show-13825.html

Fuller · 发表于 2021-12-20 16:30:09

针对这个网页再做一个同任务名的规则，然后把失败线索重新激活。采集完成以后，如果还有失败的，对失败的再定义一个规则。这样经过几次，所有情况就解决了

共 4 个关于本帖的回复最后回复于 2021-12-20 16:30

	B Color Image Link Quote Code Smilies 高级模式您需要登录后才可以回帖登录 \| 立即注册回帖并转播回帖后跳转到最后一页