本帖最后由 ym 于 2015-11-20 16:35 编辑

常见问题 > 制作规则—常见问题导航 > 采集网址 > 采到的网址是不完整的,可以做下级规则的线索(待抓网址)吗

情景描述:
抓取到的超链接无法打开呢,如下图,这种地址,爬取下来的链接地址在网页中打不开,有什么办法么?想在下级线索中,用这个地址爬取下级网页数据
网址1.png

解答:不能直接打开是因为网站自身显示的就是相对网址,并不是完整地址,但是如果作为下级线索,是可以直接用,爬虫生成下级线索的时候会把网址补齐

举报 使用道具
| 回复

共 0 个关于本帖的回复 最后回复于 2015-10-22 16:10

您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-5-24 03:39