抓取失败（超时）

规则名：广州数据分析岗_猎聘

一共有100页，抓到84页停止了，显示抓取失败（超时），抓取规则不合适

试了2次都一样在84页。

在线求救~~~~~~~~

手工翻到84页，可以看到84页的网页结构和前面的有很大不同，当然前面的规则就不适用了。可以一个主题名下建立多个规则，对84页再做一个规则。

Arie-X 发表于 2018-7-25 21:41
手工翻到84页，可以看到84页的网页结构和前面的有很大不同，当然前面的规则就不适用了。可以一个主题名下建 ...

做了多个规则，从84页开始第二规则爬。到94页的时候，有两种规则的网页结构，结果又停止了……

kentlost 发表于 2018-7-25 23:17
做了多个规则，从84页开始第二规则爬。到94页的时候，有两种规则的网页结构，结果又停止了…… ...

还可以建立更多的规则，不过，我建议对比一下94页前后的变化，调整规则，让规则的适应性更高。通常，用上定位标志映射是能大幅度提高适应性。参看：https://www.gooseeker.com/doc/article-344-1.html