爬虫搜索，总是重复采一个关键词

“坐标一轮采集”，这个主题已经用了好几次了，本来是“百度地图查公司”。后来我就改了个名字，继续用。之前都没问题，今天下午采的时候，我导了1605个关键词，但是它总是重复采集谋数台里的样本关键词。在DS打数机里运行的时候，爬了一个关键词就提示完成了。今天下午早些爬的时候，1605个关键词，它爬了315次就结束了。

1，每一步动作之前都设置一下额外延时，在批量导入关键词之前先对关键词去重复
2，把延迟抓取和超时时长设置大一点，在爬虫群的调度设置中设置

umsung 发表于 2017-11-20 16:02
1，每一步动作之前都设置一下额外延时，在批量导入关键词之前先对关键词去重复
2，把延迟抓取和超时时长设 ...

设置额外延时有什么用呢？它这里没有加载不完全的问题，2级主题都采了我要的信息。它没有提示匹配失败。就是老输入同一个关键词。我的关键词已经去重复了。

1，检查添加关键词里动作步骤名称和规则里的动作名称能不能对上，如果不一致就只会抓取样本关键词。
2，“DS打数机里运行，爬了一个关键词就提示完成了”，是不是只运行了一条线索。