我的一级网页上有信息要爬,二级网页也要信息要爬,第一个二级网页爬完之后再返回一级网络进行下一次迭代,应该怎么弄

举报 使用道具
| 回复

共 6 个关于本帖的回复 最后回复于 2017-4-25 21:36

沙发
HJLing 版主 发表于 2017-4-25 20:46:24 | 只看该作者
本帖最后由 HJLing 于 2017-4-25 20:48 编辑

第一种情况:
每一个二级网页都有独立网址
那就直接做层级规则
参考教程《采网址做层级采集

第二种情况:
点击进去二级网页网址不变
这就需要用连续动作点击
如果点击后弹出新页面
还需要用到旗舰版的飞掠功能
如果点击后在当前页面打开
要用到旗舰版的回退功能
举报 使用道具
板凳
justme 新手上路 发表于 2017-4-25 21:11:30 | 只看该作者
旗舰版在哪儿看
举报 使用道具
地板
HJLing 版主 发表于 2017-4-25 21:14:32 | 只看该作者
举报 使用道具
5#
justme 新手上路 发表于 2017-4-25 21:35:14 | 只看该作者
HJLing 发表于 2017-4-25 21:14
http://www.gooseeker.com/about/charge.html

那除了飞滚这种办法还有其他方法吗

举报 使用道具
6#
justme 新手上路 发表于 2017-4-25 21:35:39 | 只看该作者
HJLing 发表于 2017-4-25 21:14
http://www.gooseeker.com/about/charge.html

那除了飞滚这种模式还有其他方法吗
举报 使用道具
7#
HJLing 版主 发表于 2017-4-25 21:36:39 | 只看该作者
上面说了很多种情况
每种情况都说了方法了
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 360或火绒等杀毒软件导致GooSeeker爬虫软件
  • 话题分析(NMF模型和LDA模型)软件的安装和
  • 运行Apple无法验证的程序的方法
  • 文本聚类分析软件的安装和使用方法
  • 利用AI阅读和分析文本:扣子COZE记录用户反

热门用户

GMT+8, 2025-5-5 07:15