集搜客GooSeeker网络爬虫

标题: 第19期在线培训_翻页及层级抓取 [打印本页]

作者: HJLing    时间: 2016-6-24 14:17
标题: 第19期在线培训_翻页及层级抓取
本帖最后由 wangyong 于 2017-9-14 16:34 编辑

网页采集 ->  高级视频 -> 翻页及层级抓取
http://v.youku.com/v_show/id_XMjgyNTk5MjU1Ng==.html
不想看广告?直接下视频

作者: mz2358639    时间: 2016-8-15 21:37
我想翻页来获取第二级网址呢?要怎么做?好像会出错。。
作者: Fuller    时间: 2016-8-15 22:33
mz2358639 发表于 2016-8-15 21:37
我想翻页来获取第二级网址呢?要怎么做?好像会出错。。

一般来说,普通翻页后,还是属于第一层,同一个主题。很多人都问既翻页,又有第二层,该怎么做。可以在教程首页搜索“层级 翻页”,能看到很多讨论:http://www.gooseeker.com/tuto/tu ... +%E7%BF%BB%E9%A1%B5
作者: mz2358639    时间: 2016-8-15 22:55
Fuller 发表于 2016-8-15 22:33
一般来说,普通翻页后,还是属于第一层,同一个主题。很多人都问既翻页,又有第二层,该怎么做。可以在教 ...

我会了,不过不知道这样是不是正确的:我是先做了翻页,再做的层级。
之前是相反所以做错了。
作者: Fuller    时间: 2016-8-15 23:36
mz2358639 发表于 2016-8-15 22:55
我会了,不过不知道这样是不是正确的:我是先做了翻页,再做的层级。
之前是相反所以做错了。 ...

翻页和层级没有相互影响。层级不是在当前窗口立马抓取的,而是只把网址存下来
作者: lusiluo    时间: 2016-9-10 13:06
使集搜客软件的过程中,360经常提示有风险,有泄露隐私信息的风险,问是否删除某个文件,是怎么回事?
作者: ym    时间: 2016-9-10 13:28
lusiluo 发表于 2016-9-10 13:06
使集搜客软件的过程中,360经常提示有风险,有泄露隐私信息的风险,问是否删除某个文件,是怎么回事? ...

在安装和使用集搜客的过程中碰到了一些由于360的误报,而造成的如服务器连接失败,个别文件被删除,安装过程不停出360的警告信息等问题。这些问题给部分用户造成了困扰,影响了用户正常的数据获取。本文给出应对的措施,同时附上第三方检测机构对集搜客的检测报告。
http://www.gooseeker.com/about/install.html
作者: lusiluo    时间: 2016-9-10 13:55
ym 发表于 2016-9-10 13:28
在安装和使用集搜客的过程中碰到了一些由于360的误报,而造成的如服务器连接失败,个别文件被删除,安装 ...

好的,谢谢~
作者: yangliu2017    时间: 2017-11-22 09:52
不适合没有爬虫基础的人使用,太麻烦,根本看不懂。
作者: umsung    时间: 2017-11-22 09:56
yangliu2017 发表于 2017-11-22 09:52
不适合没有爬虫基础的人使用,太麻烦,根本看不懂。

建议从入门开始看起,这里有全部的文字教程《文字教程》,入门视频教程《入门视频》

作者: Fuller    时间: 2017-11-22 09:57
yangliu2017 发表于 2017-11-22 09:52
不适合没有爬虫基础的人使用,太麻烦,根本看不懂。

从这一篇开始入门:http://www.gooseeker.com/tuto/tutor_article.html?t=2对于还没有入门的新手,一定要从头看两篇教程,不能跳着看,这个视频在《从入门到精通》教程中是第4和第10章,不适合入门学习





欢迎光临 集搜客GooSeeker网络爬虫 (http://www.gooseeker.com/doc/) Powered by Discuz! X3.2