本帖最后由 umsung 于 2017-10-30 18:03 编辑

测试能显示出数据,但抓取却有一项没有数据怎么办?
举报 使用道具
| 回复

共 1 个关于本帖的回复 最后回复于 2017-10-30 18:06

沙发
bowieD 金牌会员 发表于 2017-10-30 18:06:53 | 只看该作者
测试能显示出数据,但在抓取时有一项却没数据,这是因为网页结构有些细微的差别,爬虫定位不到抓取失败。
1,可以先坐上定位标志映射,精确爬虫的采集范围。
2,如果定位标志不行,就需要自定义xptah去定位抓取内容,由于很多网页结构相似,却又略微差别,可能是因为所在的节点位置不同导致的,这需要用自定义xpath定位到区块节点所有下的某个节点。
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 利用AI阅读和分析文本:扣子COZE记录用户反
  • 在网页片段内直观标注——以B站评论采集为
  • 利用AI阅读和分析文本:使用COZE建设游记文
  • 使用AI工具Kimi生成python代码为文本分析结
  • 苹果mac电脑安装集搜客网络爬虫软件失败的

热门用户

GMT+8, 2024-11-1 06:59