同一个规则进行二次采集会覆盖之前采集内容吗？

shujukeji

目前我用了三级规则，用A规则生成B规则线索然后B规则生车C规则线索。

但爬取完A后会有存在抓取失败线索，是否需要重新爬取，会覆盖之前内容吗？

怎么设置爬取就可以接着之前爬好的线索只爬取失败的和未爬取过的线索？

shengchengx · 发表于 2017-6-28 09:52:41

导入到集搜客的服务器时，会自动去重。
已经爬取的线索，如果不主动激活是不会重复抓取的呢

shujukeji · 发表于 2017-6-28 10:23:05

shengchengx 发表于 2017-6-28 09:52
导入到集搜客的服务器时，会自动去重。
已经爬取的线索，如果不主动激活是不会重复抓取的呢 ...

这样子啊，好的，get到了

，谢谢啦

共 2 个关于本帖的回复最后回复于 2017-6-28 10:23

	B Color Image Link Quote Code Smilies 高级模式您需要登录后才可以回帖登录 \| 立即注册回帖并转播回帖后跳转到最后一页