快捷导航
9 125

异构型怎么做多个层级

CC177CC 于 2018-10-10 22:04 发表 [复制链接]
搜索的二级页面有三四种网页结构,怎么做多个下级规则,自己只能做一个
1.jpg 2.jpg 3.jpg
举报 使用道具
| 回复

共 9 个关于本帖的回复 最后回复于 2018-10-12 17:47

Fuller 管理员 发表于 2018-10-11 09:56:01 | 显示全部楼层
多个规则.png
同一个主题名下可以定义多个规则,规则编号那里做修改。你这种情况就需要这样为下级规则定义多个
举报 使用道具
CC177CC 初级会员 发表于 2018-10-11 10:02:19 | 显示全部楼层
Fuller 发表于 2018-10-11 09:56
同一个主题名下可以定义多个规则,规则编号那里做修改。你这种情况就需要这样为下级规则定义多个
...

新建一个谋数台,然后重新做一个二级规则,主题名不变,只是规则1改成规则2是吗
举报 使用道具
CC177CC 初级会员 发表于 2018-10-11 10:11:18 | 显示全部楼层
Fuller 发表于 2018-10-11 09:56
同一个主题名下可以定义多个规则,规则编号那里做修改。你这种情况就需要这样为下级规则定义多个
...

无标题.jpg
请问这样是对的吗?

举报 使用道具
Fuller 管理员 发表于 2018-10-11 10:17:14 | 显示全部楼层
上下级关系不应该有两个分叉,我加载你的规则看看
举报 使用道具
Fuller 管理员 发表于 2018-10-11 10:19:56 | 显示全部楼层
我加载了一下,一级到二级的爬虫路线没有问题
举报 使用道具
Fuller 管理员 发表于 2018-10-11 10:21:07 | 显示全部楼层
我看了一下,两个规则都是采集人民网论坛的,他们的结构差异有这么大?需要两个规则?一般来说,针对同一个网站就一个规则就行了
举报 使用道具
CC177CC 初级会员 发表于 2018-10-11 21:44:28 | 显示全部楼层
Fuller 发表于 2018-10-11 10:21
我看了一下,两个规则都是采集人民网论坛的,他们的结构差异有这么大?需要两个规则?一般来说,针对同一个 ...

一个是人民网的新闻 一个是论坛 两个还是有差的 一个规则弄不出来
所以应该是有一个分叉才对吗?

举报 使用道具
tuesday1 初级会员 发表于 2018-10-11 23:57:10 | 显示全部楼层
CC177CC 发表于 2018-10-11 21:44
一个是人民网的新闻 一个是论坛 两个还是有差的 一个规则弄不出来
所以应该是有一个分叉才对吗?

那就是对的
举报 使用道具
CC177CC 初级会员 发表于 2018-10-12 17:47:57 | 显示全部楼层
我重新做了一个 就只改动了规则1 2 但是第一层有700多条,开始第二层的时候说只有300多条线索
请问是怎么回事呢?
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 大型百货商场会员画像描绘
  • 自动导入导出数据
  • 批量爬取蘑菇街商品价格、评论信息
  • 微博用户数据分析
  • 批量爬取苏宁商品价格、评论信息

热门用户

集搜客GooSeeker网络爬虫 ( 粤ICP备11065265号-2 )

GMT+8, 2018-10-23 02:18