集搜客GooSeeker网络爬虫

标题: 关于点击后弹出新网页网址的抓取问题 [打印本页]

作者: zjjtest 时间: 2018-1-15 11:01
标题: 关于点击后弹出新网页网址的抓取问题
有一个页面需要点击按钮后才能弹出需要抓取内容的页面也就是说弹出页面的网址才是线索但是查案按钮处超链接A标签标签中并没有直接的跳转网址显示
请问在这样的情况下如果批量抓取按钮关联网址数据某出台定位到按钮标签之后显示如下信息
[attach]8719[/attach]
求大神指点谢谢

作者: 数据集 时间: 2018-1-15 11:38
1，如果页面有独立的网址，但是在列表页不能直接采集到链接，则需要构造网址，观察一下每一页的网址是否有规律，可以在设置规则时通过concat函数来拼接网址。参考《xpath常用函数用法》

2，如果每一页没有独立网址，则需要连续点击动作去点击每一个按钮，参考《连续动作》

第一种方法优先使用。

作者: zjjtest 时间: 2018-1-16 10:33

数据集发表于 2018-1-15 11:38
1，如果页面有独立的网址，但是在列表页不能直接采集到链接，则需要构造网址，观察一下每一页的网址是否有 ...

我试试看~

欢迎光临集搜客GooSeeker网络爬虫 (https://www.gooseeker.com/doc/)