主题名:医生列表页+丁香医生主页

点击“问医生”能够跳转到医生的主页地址,但是网页结构里找不到@herf。我需要点击这个按钮,跳转到下一个链接里才能采集到网址。再回退,点击下一个“问医生”,采集第二个医生的主页地址。并且医生不是一次性全部显示,需要点击加载更多才能显示全部的医生。
我想知道怎样让爬虫在回退后,按列表顺序一路点下去采集全部医生主页地址。以及点击加载更多这种动作应该怎么加进去。

列表页.png (64.78 KB, 下载次数: 492)

列表页.png
举报 使用道具
| 回复

共 2 个关于本帖的回复 最后回复于 2020-4-28 23:35

沙发
Fuller 管理员 发表于 2020-4-28 23:33:48 | 只看该作者
这个网站的回退功能我要测试一下才能知道,集搜客网络爬虫软件是有回退的,但是打不开这个网页,采摘浏览器还没有实现回退,我要测试一下看看有什么办法可以实现回退
举报 使用道具
板凳
Fuller 管理员 发表于 2020-4-28 23:35:03 | 只看该作者
也可能需要在采摘软件上加上对回退功能的支持,我跟开发讨论一下
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-4-20 01:44