目录
- 快捷采集
- 初级教程(新版)
- 初级教程(老版)
- 数据转Excel处理
- 爬虫规则管理
- 高级教程(新版)
- 高级教程(老版)
- 用爬虫群分布式高效采集
- 爬虫关键知识拓展
- 问题集锦
- 实战演练案例
- 爬虫安装说明
- 关于集搜客
集搜客交流群
2000人群:点击加入
爱彼迎收集评论翻页问题
看了之前的解决帖子,但是是老版的,新版的页面好像不一样,找不到之前的解决方法 https://www.gooseeker.com/doc/thread-13112-1-1.html 附 看的相关的回答 [attach]15417[/attach] 之前用过翻页页码 也只能爬到1,2页 求 解答!!
爱彼迎民宿基本信息抓取翻页问题
[i=s] 本帖最后由 yangsiyu233 于 2020-1-4 20:27 编辑 [/i] 参考这篇对评论进行抓取翻页成功了https://www.gooseeker.com/doc/thread-11792-1-1.html 使用相同的方法抓取搜索页面的基本信息结果只在前两页循环,中间有两次测试时抓取到了第三页,但还是没办法实现一直翻页
为什么翻页抓取爱彼迎评论总是在前两页循环
附上爱彼迎网址:https://zh.airbnb.com/rooms/3708846?s=5qWk9arw
为什么翻页抓取爱彼迎评论总是在前两页循环
[size=16px]开始运行之后,第一第二页采集之后,又会跳回第一页再次循环,永远到不了第三页,请问是什么情况?[/size] [size=16px]附上网页地址:https://www.airbnb.cn/s/homes?query=%E5%B9%BF%E5%B7%9E&refinement_paths%5B%5D=%2Fhomes&allow_override%5B%5D=&s_tag=1sbTCY5g[/size]
爱淘宝-手机
样本复制后,只抓取了第一行样本信息,未能抓取整个网页手机的信息。
爱奇艺指数如何抓取
爱奇艺指数完全不会抓取, 我想得到曲线上每个点的数据,有什么办法 http://index.iqiyi.com/q/?
欢迎围观吐槽,新手做规则的常见错误大盘点
[i=s] 本帖最后由 ym 于 2015-9-7 12:54 编辑 [/i] 新手在一开始,多少会犯一点错误,不过没关系,犯错也是学习的必经阶段,毕竟连高手也是无可避免地会犯错,只要吸取经验,就能掌握到方法。下面会列出一些常见错误,虽然不是很全面,但希望大家能一起补充,为新手菜鸟减少学习障碍。 图1说明规则保存失败,原因可能有: 1. 主题名已经被占用,可以点击“命名主题”窗口的“查重“按钮来判断是否被占用,如果是被占用的话,换一个新的主题名就可以保存规则了。 2. 如果是[url=http://www.gooseeker.com/doc/article-75-1.html]多层级[/url]规则,可能是下级规则的主题名被占用了,换一个下级主题名就可以保存了。 3. 服务器连接中断,看看连接状态是否变成了红色,只有绿色才是连接正常,才能保存规则,关于连接中断的解决方法可以参考[url=http://www.gooseeker.com/doc/thread-259-1-1.html]http://www.gooseeker.com/doc/thread-259-1-1.html[/url] [align=center][attach]68[/attach] 图1 规则保存失败 [/align] 图2的错误是指线索无效,原因是爬虫路线中的线索没有映射范围,估计是新建了线索但是忘了做映射,做完线索映射就可以了。 [align=center][attach]69[/attach] 图2 线索无效 [/align] 造成图3的原因是对抓取内容既做内容映射,又做[url=http://www.gooseeker.com/doc/article-57-19.html]定位标志[/url]映射时,选择的网页节点不是在同一个dom树结构,就会提示这样的错误,这种情况就要对抓取内容清除定位标志映射,再找准目标信息对应的网页节点和选择合适的定位标志来重新映射,这样就能用好定位标志了。 [align=center][attach]71[/attach] 图3 内容映射和标志映射不一致 [/align] 图4的原因是做了定位标志映射,但是没有勾上高级设置,就会报这样的错误;实际上,对抓取内容作定位标志映射都会自动勾上高级设置,并且默认抓取文本内容,这种报错可能是用户因为误操作而取消了高级设置导致的,只要重新勾上高级设置和选择文本内容就可以了。 [align=center][attach]70[/attach] 图4 要做高级设置 [/align]
爱回收连续动作点击不了
http://aihuishou.com/shouji/ 要点击上面每个品牌
爱奇艺播放量点赞量抓取问题!
我通过2级规则抓取爱奇艺点赞和播放量,第一级我已经拿到爱奇艺播放url,通过二级规则具体抓取每一集节目的数据,因为爱奇艺网页结构有点特殊
【爱奇艺_视频分类列表】#GooSeeker数据DIY#
[list] [*][b]标题:[/b]【爱奇艺_视频分类列表】#GooSeeker数据DIY# [*][b]类别:[/b]视频 [*][b]网站:[/b]爱奇艺 [*][b]采集字段:[/b]名称、主演、链接 [*][b]DIY体验入口89%BA_%E8%A7%86%E9%A2%91%E5%88%86%E7%B1%BB%E5%88%97%E8%A1%A8]爱奇艺[/list] [b]【常见问题】— 欢迎跟帖留言[/b]
【爱奇艺_视频详情评论】#GooSeeker数据DIY#
[list] [*][b]标题:[/b]【爱奇艺_视频详情评论】#GooSeeker数据DIY# [*][b]类别:[/b]视频 [*][b]网站:[/b]爱奇艺 [*][b]采集字段:[/b]名称、评论人、评论内容 [*][b]DIY89%BA_%E8%A7%86%E9%A2%91%E8%AF%A6%E6%83%85%E8%AF%84%E8%AE%BA]爱奇艺[/list] [b]【常见问题】— 欢迎跟帖留言[/b]
【爱股说】#集搜客GooSeeker数据集开放目录#
[list] [*]标题:【爱股说】#集搜客GooSeeker数据集开放目录# [*]分类:金融 [*]关键词:爱股说
论数据分析对我的恋爱指导作用
在你看这个故事之前,po主想先问一句,你有暗恋的人吗?Po主一直觉得暗恋是一件很懦弱的事情,po 主知道这句话一出,应该有很多人想赐po主一丈红,请各位小主收起揍po主的心,耐心听po主解释。暗恋是一种什么状态呢 ...
【爱奇艺指数】#集搜客GooSeeker数据集开放目录#
[list] [*]标题:【爱奇艺指数】#集搜客GooSeeker数据集开放目录# [*]分类:互联网 [*]关键词:爱奇艺、指数 [*]摘要:查看网络视频的播放趋势、播放行为和人群特征。
加载爱奇异视频页面提取数据提不到
在爱奇异视频页面上的播放量数据是需要页面完全加载完成后才可以显示的。