翻页失败

啊啊啊啊，翻页又失败了，二级任务也不知道为啥只能抓一页，大佬帮帮我

规则名：
第一层任务2021
第二层抓取2021
谢谢大家了

无论第1级规则还是第2级规则， 都不要把所有的抓取字段都设置为“关键内容”， 选择其中一个一定会有的内容作为“关键内容”

关键内容在第一层应该没有设置的地方吧

我测试了你的第一级规则，翻页不成功。



你用LI的@class作为下一页标志，这样的话，翻页点击位置是LI节点。展开LI节点可以看到，LI下面还有一个A节点，所以，推断是点击LI不行，要点击下面的A节点

我是这样做的翻页映射



翻页区使用具有@class='next'的LI节点，而下一页标志是I节点的class属性。


为什么要用这个翻页区？因为像你那样选择更大范围的翻页区的话，这个区域就含有 <（往前翻） 和 >（往后翻），他们区分不开。


一开始我也用这个大的翻页区，像下图那样，点击“测试”按钮，看到生成的翻页XPath，拷贝到搜索条那里，点击搜索按钮，发现定位到 < 和 > 两个节点，这样的话，爬虫运行的时候就没法正确翻页。如下图。所以，我就改成上图那样的翻页区

第二级规则，我看到你给每个抓取内容都勾上了“关键内容”，如果某个页面上没有这么多内容，就会失败。如下图，那些具有绿色C标志的都是勾了关键内容。应该把哪些可有可无的不要勾。双击这个抓取内容，在设置页面上，不要勾“关键内容”

Fuller 发表于 2021-5-31 23:25
第二级规则，我看到你给每个抓取内容都勾上了“关键内容”，如果某个页面上没有这么多内容，就会失败。如下 ...

这一部分看明白了，非常感谢。翻页部分我再研究一下

Fuller 发表于 2021-5-31 23:20
我是这样做的翻页映射

这个地方是怎么从结果看出对应了两个按钮呢