11#
Fuller 管理员 发表于 2016-12-24 16:47:34 | 只看该作者
找到一个窍门



抓这个onclick信息,里面还有了详情页的关键信息,用这个信息可以构造出来下级网址,就不用飞掠模式了

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
12#
Givent 中级会员 发表于 2016-12-25 10:47:12 | 只看该作者

我做的主题名:快到网1  快到网2  还是抓取不了
举报 使用道具
13#
shenzhenuser1 版主 发表于 2016-12-27 14:40:14 | 只看该作者
本帖最后由 wangyong 于 2016-12-27 14:41 编辑

不用飞掠模式就需要根据@onclick将下级链接拼出来勾选下级线索,需要自定义xpath
xpath表达式:
  1. concat('http://www.56top.cn/openDriverDetailed.jspx?id=',substring-before(substring-after(./@onclick,"('"),"')"))
复制代码


选中抓取内容勾选抓高级设置

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
14#
shenzhenuser1 版主 发表于 2016-12-27 14:44:27 | 只看该作者

下级目标主题名要填快到网2


本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
15#
shenzhenuser1 版主 发表于 2016-12-27 14:45:29 | 只看该作者

翻页要用相对翻页《相对翻页

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 爬网址做层级采集——以当当商品爬虫为例
  • 网络爬虫采集列表数据
  • UMAP的min_dist参数有什么作用?
  • UMAP的n_neighbors参数有什么作用?
  • HDBSCAN的min_samples和min_cluster_size参

热门用户

GMT+8, 2026-7-1 02:12