到最后一页没有停止，一直采集最后一页信息

采集完最后一页并没有停止任务，一直在采集最后一页，后面的全部是重复数据

这种情况是因为虽然到最后一页了，但是网页上的翻页标志还是存在所以就会一直翻页。

解决方案
1，使用打数机单搜集搜的采集时可以在高级→终点标志→重复内容，勾上重复内容后打数机会判断抓取的内容是否重复，如果发现重复就会自动断掉。

如果使用爬虫群抓取，就需在调度参数中“”重复内容中断“”勾上“是”。

2，自动生成的翻页规则会选择的定位标志不一定最合适，可以通过xpath设置精确的翻页规则。
参考教程自定义xpath解决翻页重复