用下一页作为翻页记号，然后又爬灰第一页了

https://www.nvshens.com/g/23338/7.html
这个网站最后一页爬取完又会跳到第一也重复爬取  怎么设置终止呢？  软件哪个检测重复停止的功能在这个网页派不上用场

比如例子这个网页 爬取完第7页 又回第一页重复爬取

这种需要手工修改翻页规则，经过观察，当前页码是一个span，那么如果“下一页”的前一个节点是span，就不点击了。
手工修改规则一定要注意存规则的顺序，因为自动生成规则会冲掉手工修改的内容。
第一步，按照正常定义规则的过程，把规则定义好
第二步，点击工具条上的“存规则”，把自动生成的规则存好
第三步，在“爬虫路线”工作台上点击查看规则按钮，可以看到翻页规则，是一个xpath
第四步，直接修改xpath，然后点击旁边的“保存修改”
这样手工修改就生效了

Fuller 发表于 2018-10-24 09:16
这种需要手工修改翻页规则，经过观察，当前页码是一个span，那么如果“下一页”的前一个节点是span，就不点 ...

我就会简单的操作。。。这个改代码对我来说有点复杂了。。。T-T