快捷导航
5 1592

层级采集出现问题

wanyy063700 于 2019-3-2 11:33 发表 [复制链接]
本帖最后由 wanyy063700 于 2019-3-2 11:38 编辑


这里按照视频确定好第一层级抓取内容后,在岗位链接处添加下级搜索,并保存。


QQ图片20190302041625.png
然后在第二层级抓取,这里跟视频不一样的是层级1整理箱和层级二整理箱并在了一起。我设置好第二层级后,开始采集会出现验证规则不匹配的错误。

这里的验证规则是规则_1,请问要重新设置吗
举报 使用道具
| 回复

共 5 个关于本帖的回复 最后回复于 2019-3-2 17:04

maomao 论坛元老 发表于 2019-3-2 11:41:52 | 显示全部楼层
举报 使用道具
Fuller 管理员 发表于 2019-3-2 11:43:32 | 显示全部楼层
你的规则的主题名是什么?有主题名才能加载。

我看到第二级只采集了“要求”,用了定位标志映射,在DOM上那个class值是什么?截图没有截全。
举报 使用道具
Fuller 管理员 发表于 2019-3-2 16:51:06 | 显示全部楼层
第一级有这几个问题:问题1:应该设置样例复制映射,参看《采集列表数据》,这样才能把所有学校采集下来
样例复制20190302164832.png

问题2:应该选择偏好class,以提高规则的适应性
偏好20190302164902.png
举报 使用道具
Fuller 管理员 发表于 2019-3-2 16:58:11 | 显示全部楼层
定义第二级的时候,应该先选择菜单 规则-》新建规则, 把工作台清理掉。你这个规则里面含有第二级的整理箱,会采集失败,现在可以采用删除功能,先选中这个整理箱,再把这个整理箱删掉
删除20190302165636.png

同样,在爬虫路线工作台上,也要删除上一级的线索
删线索20190302165720.png
举报 使用道具
Fuller 管理员 发表于 2019-3-2 17:04:05 | 显示全部楼层
第二级有个问题
定位标志20190302170116.png
我看到你用红框中的定位标志做了定位标志映射,本来定位标志映射可以提高规则的适应性,不是必做的,只是为了提高适应性,但是这个网站不能用红框的,因为不同网页这个标志不一样。
那么要必看这个定位标志,而是用红色箭头的那个节点做定位标志,因为那个是所有网页都一样的。
而蓝色箭头那个节点可以用来做内容映射。
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 数据管家和集搜客网络爬虫超出配额是怎么回
  • 用GooSeeker数据管家能采集微博内容吗?
  • 怎样使用GooSeeker数据管家启动采集任务?
  • 集搜客数据管家-网络爬虫软件,中文分词,情
  • 如何使用集搜客分词平台做社会网络图分析?

热门用户

GMT+8, 2020-11-25 04:26