我抓取评论，设定了一个连续点击展开更多的内容的动作，然后就抓去了大量的重复信息，这个要怎么解决呀。

zhongwuhuizhi

规则名indiegogo捐款人

shengchengx · 发表于 2017-7-20 16:59:07

这个规则名是不是打错了呢，我查不到呢

zhongwuhuizhi · 发表于 2017-7-20 17:17:19

shengchengx 发表于 2017-7-20 16:59
这个规则名是不是打错了呢，我查不到呢

不好意思，打错了
规则名idg捐款人

zhongwuhuizhi · 发表于 2017-7-20 17:19:11

shengchengx 发表于 2017-7-20 16:59
这个规则名是不是打错了呢，我查不到呢

idg捐助人

shengchengx · 发表于 2017-7-20 18:05:18

zhongwuhuizhi 发表于 2017-7-20 17:19
idg捐助人

可以直接使用翻页来做呢，记号线索来做，他翻页一次会重复一直，你直接看最后一个xml就好了

zhongwuhuizhi · 发表于 2017-7-20 18:26:49

shengchengx 发表于 2017-7-20 18:05
可以直接使用翻页来做呢，记号线索来做，他翻页一次会重复一直，你直接看最后一个xml就好了
...

但是他的网址是固定不变的，翻页可以么，在att...里，也没有@her..那个选项

wangyong · 发表于 2017-7-20 19:00:33

翻页网址不变是没关系的，你用记号线索来做翻页，选择的记号就是网页上的“seemore”

wangyong · 发表于 2017-7-20 19:01:03

zhongwuhuizhi · 发表于 2017-7-21 17:05:58

wangyong 发表于 2017-7-20 19:01
记号线索教程：http://www.gooseeker.com/doc/article-89-1.html

谢谢，问题已经解决了，但是还有一个问题，还是这个规则，但是名字有链接的可以爬名字，名字没有链接的直接跳过来，这个怎么解决呀。

shengchengx · 发表于 2017-7-21 17:59:36

zhongwuhuizhi 发表于 2017-7-21 17:05
谢谢，问题已经解决了，但是还有一个问题，还是这个规则，但是名字有链接的可以爬名字，名字没有链接的直 ...

你在名字这边设置了关键内容呢，如果没有就不抓了呢

共 9 个关于本帖的回复最后回复于 2017-7-21 17:59

	B Color Image Link Quote Code Smilies 高级模式您需要登录后才可以回帖登录 \| 立即注册回帖并转播回帖后跳转到最后一页