集搜客GooSeeker网络爬虫

标题: 上级在爬，下级的数据线索怎么不会变化 [打印本页]
作者: bof_king    时间: 2017-9-20 15:59
标题: 上级在爬，下级的数据线索怎么不会变化
上级在爬，下级的数据线索怎么不会变化。上级通过翻页一直在获得数据项，可下级的线索量没变化
作者: bowieD    时间: 2017-9-20 16:38
1，查看上级规则中下级线索中的目标主题名和下级规则主题名是否一致，如果不一致线索是对应不到下级规则中去的。
2.，层级采集不是连贯的，上级规则抓取到的线索，需要手动点击单搜或集搜启动下级线索。
作者: bof_king    时间: 2017-9-20 16:53
是连贯抓取的，下级的线索刚开始会增加，到了一个数值就不会在变化了，可上级还是在爬
作者: bowieD    时间: 2017-9-21 10:19
bof_king 发表于 2017-9-20 16:53
是连贯抓取的，下级的线索刚开始会增加，到了一个数值就不会在变化了，可上级还是在爬 ...

那就是规则问题，上级没有爬到线索，下级就不会增加。
作者: tobecenter    时间: 2018-7-9 16:02
bowieD 发表于 2017-9-21 10:19
那就是规则问题，上级没有爬到线索，下级就不会增加。

问一下哈，你的是不是等上级跑完了之后，再去开始爬下级的线索？？就是说不能同时爬是吧
作者: wangyong    时间: 2018-7-9 16:04
可以同时爬



欢迎光临 集搜客GooSeeker网络爬虫 (https://www.gooseeker.com/doc/) Powered by Discuz! X3.2