本帖最后由 ym 于 2015-11-20 16:05 编辑

常见问题 > 制作规则—常见问题导航 > 采集多层级网页数据 > 第一层和第二层一起抓,第二层为什么会少个数
在采集下级网址时,第一层给第二层生成线索网址的过程中会自动过滤重复网址,如果第二层少了,说明第一层本来就是包含重复的二级网址。
也可以把第一级的采集结果导入到excel里进行检查。
举报 使用道具
| 回复

共 0 个关于本帖的回复 最后回复于 2015-10-22 15:46

您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 为BERTopic安装需要的预训练SBERT模型
  • 在什么情况下使用弹窗模式和回退功能?
  • 爬网址做层级采集——以当当商品爬虫为例
  • 网络爬虫采集列表数据
  • UMAP的min_dist参数有什么作用?

热门用户

GMT+8, 2026-8-6 02:51