我先采集数据  然后要点击一个按钮  就是图1里的那个参配按钮   进新的页面以后然后再收集   
然后我现在就找参配的href  然而找到的href是图2里那种不全的网址    只是在之前的网址上加了一个后缀的.shtml的东西      我该怎么办啊     我刚学没多久    求大神帮忙     尽量详细些  谢谢

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
| 回复

共 2 个关于本帖的回复 最后回复于 2021-2-26 14:36

来自 3#
王建国 高级会员 发表于 2021-2-26 14:36:12 | 只看该作者

在新版的数据管家中,可以在抓取内容的高级设置里,勾上“补全网址”,爬虫软件能自动补上前面缺失的部分

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
沙发
Fuller 管理员 发表于 2016-7-4 09:19:19 | 只看该作者
如果你做两级采集规则,第一级采到图2的href后,会自动补全生成线索,所以,你不用担心这样的网址生成不了正确的线索。

但是,采集结果文件中的href不会自动补齐的
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 为BERTopic安装需要的预训练SBERT模型
  • 在什么情况下使用弹窗模式和回退功能?
  • 爬网址做层级采集——以当当商品爬虫为例
  • 网络爬虫采集列表数据
  • UMAP的min_dist参数有什么作用?

热门用户

GMT+8, 2026-7-17 23:03