集搜客GooSeeker网络爬虫

标题: 怎么看抓取失败的关键词 [打印本页]

作者: 数据菊 时间: 2017-11-15 22:49
标题: 怎么看抓取失败的关键词
我用百度地图搜地址，因为关键词也是爬虫爬来的，格式没弄好导致查找失败。我知道有这么些关键词，但是因为量很大，一个个找和改很麻烦。我想直接先爬着，把失败的筛出来改就方便多了。但是我在会员中心只找到失败线索。搜索时网址是不会变的，变成线索从头到尾都只有一条。

作者: yangwenge 时间: 2017-11-16 09:20
在会员中心批量添加的关键词，可以在会员中心--规则管理--规则名--查看中看到采集情况
[attach]8370[/attach]

作者: 数据菊 时间: 2017-11-17 13:03

yangwenge 发表于 2017-11-16 09:20
在会员中心批量添加的关键词，可以在会员中心--规则管理--规则名--查看中看到采集情况
...

关键词查看那里只能看抓过没有，看不到抓取失败的。选中的那个是我看着它匹配失败的，但是它也显示不出来。

作者: yangwenge 时间: 2017-11-17 14:32

数据菊发表于 2017-11-17 13:03
关键词查看那里只能看抓过没有，看不到抓取失败的。选中的那个是我看着它匹配失败的，但是它也显示不出 ...

匹配失败可能的原因是采集规则匹配失败了，可以检查下采集规则。
列如：采集规则勾选了关键内容，但是输入关键词后没有搜索结果。

欢迎光临集搜客GooSeeker网络爬虫 (https://www.gooseeker.com/doc/)