猫途鹰英文点评抓取需要点击更多才能显示完全，怎么抓

如图，该怎么抓，看了教程之后抓取的还是不完整的

这个需要做连续动作，逐个点击“更多”。连续动作每做一轮，就会产生一个抓取结果，这样会有大量的重复内容产生，所以，在导出了抓取结果以后，需要做一个过滤操作。另外，还有做一个替换操作。因为每条内容会抓到点击“更多”前的内容和点击后的内容，要用点击后的内容覆盖点击前的内容

Fuller 发表于 2018-5-18 09:00
这个需要做连续动作，逐个点击“更多”。连续动作每做一轮，就会产生一个抓取结果，这样会有大量的重复内容 ...

就是在一个主题下进行连续动作和数据采集、翻页三个功能吗？

是的，不过猫途鹰评论这里只需要点一次“更多”后，其他评论就相当于都点了的效果了

wangyong 发表于 2018-5-18 14:51
是的，不过猫途鹰评论这里只需要点一次“更多”后，其他评论就相当于都点了的效果了 ...

只需要一个点击的连续动作吗

1278467024 发表于 2018-5-18 15:02
只需要一个点击的连续动作吗

只需要一个点击动作，点击动作的xpath要能定位到所有的“更多”，这样爬虫就会逐个去点击每个“更多”。

请问楼主顺利解决了吗 我现在也卡在这个问题上

yizhiyu1996 发表于 2019-4-2 23:57
请问楼主顺利解决了吗 我现在也卡在这个问题上

你的规则存了以后，把主题名发出来，管理员会帮你诊断问题出在哪里。这个帖子都是泛泛讨论，可能解决不了具体问题，要对着实际问题进行解决