集搜客网络爬虫能实现这种场景吗:aspx做的网站,输入搜索条件,搜到一个列表,点击每一行,进入内页,再点击进入详情。
举报 使用道具
| 回复

共 1 个关于本帖的回复 最后回复于 2016-10-6 11:10

沙发
Fuller 管理员 发表于 2016-10-6 11:10:50 | 只看该作者
集搜客是不管网页用什么技术做的,抓取方法一致。

aspx使用体验方面可能更像一个图形化界面的程序,它有很多控件,操作起来有点不太像普通网页。但是,本质上都是网页。从体验上有个很大的不同:点击某个信息,会弹出新窗口,这个新窗口中的url网址拿出来单独加载的话就失败,只能一边点击一边抓取。

如果遇到这种需要抓取弹出窗口的情形,就需要GooSeeker软件的飞掠抓取模式:http://www.gooseeker.com/doc/thread-2221-1-1.html
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 为BERTopic安装需要的预训练SBERT模型
  • 在什么情况下使用弹窗模式和回退功能?
  • 爬网址做层级采集——以当当商品爬虫为例
  • 网络爬虫采集列表数据
  • UMAP的min_dist参数有什么作用?

热门用户

GMT+8, 2026-8-8 16:59