本帖最后由 ym 于 2015-11-20 16:35 编辑

常见问题 > 制作规则—常见问题导航 > 采集网址 > 采到的网址是不完整的,可以做下级规则的线索(待抓网址)吗

情景描述:
抓取到的超链接无法打开呢,如下图,这种地址,爬取下来的链接地址在网页中打不开,有什么办法么?想在下级线索中,用这个地址爬取下级网页数据


解答:不能直接打开是因为网站自身显示的就是相对网址,并不是完整地址,但是如果作为下级线索,是可以直接用,爬虫生成下级线索的时候会把网址补齐

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
| 回复

共 0 个关于本帖的回复 最后回复于 2015-10-22 16:10

您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 怎样设置LDA模型的超参数alpha(α)和beta(
  • LDA主题分析模型到底是什么?
  • top2vec话题发现原理和使用方法
  • 将文本聚类和LDA分析模块安装在数据盘上的
  • GooSeeker分词软件的tf-idf算法和特征词选

热门用户

GMT+8, 2026-4-15 17:39