我看了这篇关于新版爬虫软件的教程:爬网址做层级采集——以京东商品爬虫为例
层级采集不是在爬虫路线那里定义,而是在采集字段定义的高级设置里。 但是翻页就还是在爬虫路线那里定义
我理解的对不对?
160226ckc4ockcllc4llzo.png
举报 使用道具
| 回复

共 2 个关于本帖的回复 最后回复于 2020-12-4 09:22

内容分析应用 金牌会员 发表于 2020-12-4 09:16:02 | 显示全部楼层
是的
在旧版爬虫软件里, 层级采集采集的下级任务名需要到爬虫路线那里去定义。
在新版爬虫软件里, 这个过程更方便更连贯了, 在定义采集下级网址的字段那里,就直接定义下一级的任务名。


举报 使用道具
gz51837844 管理员 发表于 2020-12-4 09:22:34 | 显示全部楼层
内容分析应用 发表于 2020-12-4 09:16
是的
在旧版爬虫软件里, 层级采集采集的下级任务名需要到爬虫路线那里去定义。
在新版爬虫软件里, 这个过 ...

旧版爬虫软件, 也可以在网址字段高级设置里定义下级任务。
不过新版软件在爬虫路线那里就不显示已定义的层级采集, 旧版软件会显示


举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-3-28 23:11