集搜客GooSeeker网络爬虫

标题: 百度旅游的弹出式页面能用集搜客抓取吗？ [打印本页]

作者: gooseeker_info 时间: 2016-11-29 17:48
标题: 百度旅游的弹出式页面能用集搜客抓取吗？

百度旅游的“详细简介”点击以后会弹出窗口，怎么给他做抓取规则？内容能用集搜客网络爬虫抓取吗？

听说很难，我问了一圈了。集搜客有这个功能吗？

作者: Fuller 时间: 2016-11-29 18:13
[attach]3121[/attach]

测试了一下，其实一个浮动窗体，不是弹出了一个新浏览器窗口。无论哪种情况，集搜客都能抓取。

如果在网页上只需点击一次“详细简介”，在爬虫路线工作台上做一个模拟点击动作就行，类似于点击tab页签。

如果在网页上需要点击好几个“详细简介”，那么在连续动作工作台上做连续点击动作。

如果不是浮动窗体，而是一个新的浏览器窗口，就要使用集搜客的飞掠抓取模式。

浮动窗体的含义就是：还是原网页，只是出现了一个新的显示层，浮在顶上。此时，网页url没有变化，只是内容做了改变，选择GS爬虫浏览器或者MS谋数台的菜单规则-》刷新页面结构，就会在DOM中反映出来这个变化，就可以继续做抓取规则了，一样做直观标注。

欢迎光临集搜客GooSeeker网络爬虫 (https://www.gooseeker.com/doc/)