集搜客GooSeeker网络爬虫

标题: 直播页面中抽奖页面的获取专题贴 [打印本页]

作者: cnhhhh 时间: 2018-5-2 17:40
标题: 直播页面中抽奖页面的获取专题贴
最近一直在研究某直播平台的抽奖页面，使用的工具主要是python+selenium+phantomjs。
来到GooSeeker是看到一篇文章，讲到这个工具可以实现自动生成xlts文件。
设想这里的高手一定不少，都可以做到工具级别了！
搜索了一下，没有与我碰到同样问题的，目前主要碰到的问题如下：
[attach]9305[/attach]

如上图，这个界面是在主页面上浮动的窗口，使用F12工具，是可以查看得到的，如下图，但是在查看源代码的时候，是无法查看到的：

[attach]9306[/attach]

网上都在说phantomjs是获取动态加载页面的神器，不过用了以后才知道，它不支持flash，只有SlimerJS是支持的，不过还没有时间研究这个工具。目前是通过其他方法，尽量提高抽奖的效率（不是成功率），但是还是对这个问题想好好研究一下，写在这里，希望有兴趣研究的朋友一起交流！

作者: Fuller 时间: 2018-5-2 19:05
学习了！你说的SlimerJS能解析flash？我要好好去学学

作者: Fuller 时间: 2018-5-2 19:09
查到一篇文章《前端自动化测试工具：SlimerJS、phantomJS 和 CasperJS》，看起来与PhantomJS同等地位，都属于自动化测试工具这类。GooSeeker网络爬虫最初也是参照自动化测试工具开发的。

这是SlimerJS的官网：https://slimerjs.org/ ，有这样的介绍
SlimerJS is similar to PhantomJs, except that it runs on top of Gecko, the browser engine of Mozilla Firefox, instead of Webkit, and it can be headless or not.

作者: cnhhhh 时间: 2019-8-28 21:54
没想到这个贴竟然在百度排在第一位，SlimerJS具体的使用还没有空研究，现在主要在研究能够稳定盈利的系统，下半辈子就靠这套系统了

欢迎光临集搜客GooSeeker网络爬虫 (https://www.gooseeker.com/doc/)