网站数据与抓取到的数据不符合是怎么回事？

主题名：抓取9

遇到困难： 抓取到后面就全白了，无法采集了。最后 抓取的数据与网站数据不符合。希望大家帮我看看，谢谢啦！

图片

网站：https://www.vivino.com/wine-countries/lebanon

规则没有问题 采不全可能是网站自身有限制不能查看全部产品

我的诊断结果是：可能是网速问题。国外网站速度太慢，我再测试一下你的主题

你可以自己再测试一下，如果多次抓取后看到的结果数量不一样，那么基本上可以排除是网站限制，基本上可以归因于网速。

目前，GooSeeker网络爬虫是突破反爬能力最强的软件，我认为这不是网站限制

Fuller 发表于 2016-8-24 14:51
我的诊断结果是：可能是网速问题。国外网站速度太慢，我再测试一下你的主题

你可以自己再测试一下，如果多 ...

我刚刚测试了几遍，每次结果都不一样。

Fuller 发表于 2016-8-24 14:51
我的诊断结果是：可能是网速问题。国外网站速度太慢，我再测试一下你的主题

你可以自己再测试一下，如果多 ...

还有什么好的方法可以解决这个问题吗？ 换连续动作 瀑布流 你觉得怎么样？

877994752 发表于 2016-8-24 16:33
还有什么好的方法可以解决这个问题吗？ 换连续动作 瀑布流 你觉得怎么样？ ...

请看红框，翻页标志前后有空格，很容易造成翻页规则失效，有些空格是看不到的，每一页的空格数量可能多可能少，就影响了规则的有效性。

像上图这样，不要选全匹配，昨晚记号映射以后，手工先把自动输入的记号值全删了，然后手工输入 Show more，这样生成的规则就好了

Fuller 发表于 2016-8-24 23:18
请看红框，翻页标志前后有空格，很容易造成翻页规则失效，有些空格是看不到的，每一页的空格数量可能多 ...

就是把按钮Show more 重新用手动输入是吧？把 全匹配不选  就可以了吗？

877994752 发表于 2016-8-25 10:32
就是把按钮Show more 重新用手动输入是吧？把 全匹配不选  就可以了吗？

是的，我都测试过了