规则加载后需分析没有问题，测试也没问题，抓取的时候匹配失败

主题名：天眼查详情370764更新版，问题是规则加载后需分析没有问题，测试也没问题，抓取的时候匹配失败，麻烦看一下，为什么

我运行了没问题啊，你匹配失败的是你后来添加的线索吧

不可能每一个都失败啊，关键是我样本网页爬的数据包括后开爬虫运行的都显示匹配失败了

ejsino 发表于 2017-2-20 11:22
不可能每一个都失败啊，关键是我样本网页爬的数据包括后开爬虫运行的都显示匹配失败了 ...

样本页面匹配应该是成功的，应该还是你添加的线索的网页结构不适用，你可以发几个匹配失败的网址出来，我再看看

http://www.tianyancha.com/company/2352900608
http://www.tianyancha.com/company/2758176263
http://www.tianyancha.com/company/2352867699
http://www.tianyancha.com/company/548739711
其中最后一个不匹配，没有经营范围是肯定不会的，前三个看着差不多，但是匹配失败了

ejsino 发表于 2017-2-20 11:46
http://www.tianyancha.com/company/2352900608
http://www.tianyancha.com/company/2758176263
http://www ...

样本页面的是这样的结构


你添加的线索其中一个是这样的结构，结构不同是肯定回匹配失败的，我看了一下你发的这几个网址这个地方的结构都不同

ejsino 发表于 2017-2-20 11:46
http://www.tianyancha.com/company/2352900608
http://www.tianyancha.com/company/2758176263
http://www ...

你的样本页面的法人是有具体名称的
报错的页面都是法人未公开的


而且你对这个字段勾选了关键内容
所以找不到这个内容就报错了

这个字段可以不用勾关键内容
因为你在另一个整理箱已经对单位名称勾选了关键内容

另外 可以对法人这个字段写自定义xpath来兼容两种页面