目录
- 快捷采集
- 初级教程(新版)
- 初级教程(老版)
- 数据转Excel处理
- 爬虫规则管理
- 高级教程(新版)
- 高级教程(老版)
- 用爬虫群分布式高效采集
- 爬虫关键知识拓展
- 问题集锦
- 实战演练案例
- 爬虫安装说明
- 关于集搜客
集搜客交流群
2000人群:点击加入
新浪微博评论查看更多翻页问题,求大神指导!
[i=s] 本帖最后由 wangyong 于 2020-12-23 12:09 编辑 [/i] 新浪微博里面评论要点击查看更多来翻页,为什么设置好规则,想爬取全部评论,但点了三次以后自动就停止了,还显示了采集完成?
分析微博上城市空气质量的博文和评论-怎样爬到更多微博数据 ...
本人的重要工作内容就是提供网络爬虫工具的技术指导,教会做毕业设计的大学生用好数据采集和内容分析软件工具,从而接触和观察到很多有意义的研究课题和研究过程1,研究案例:微博上关 ...
微博展开原文
有什么办法可以在使用关键词高级搜索的同时展开原文吗?数据量比较大,重新爬取比较耗时耗力 查看源代码发现 展开原文是是一个新的p tag [attach]12256[/attach
怎么查看更多评论?
[attach]7442[/attach]有什么办法吗?
怎么采集更多的评论
PLUS DM-i怎么样_宋PLUS DM-i值得买吗_懂车帝 (dongchedi.com) 想要采集这个网址中车友的评论
关于微博展开全文
利用论坛里的帖子和教程做了下博主主页的爬取,但是展开全文这里还是没有搞定。; 第二个是在点击展开全文后,微博正文有两个内容,一个是展开前的,一个是展开后的,所以我就遵照有篇帖子里的办法用了自定义Xpath,爬取这两个内容,可是后来测试的时候发现,前一个内容一直都在爬取第一篇微博的内容,而后一个内容一直都是第一篇有展开全文的展开后的内容,后来我把Xpath最后的[1]去掉了,前一个内容就正常了,但是因为第一个问题的存在,所以展开全文后的内容一直没有。一级规则——微博展开全文 二级规则——微博爬取博文
微博展开全文和翻页
请问自己定义微博关键词搜索规则时,如何同时实现展开全文和翻页抓取??求指教
新浪微博 点击查看更多
新浪微博,要点击查看更多才能看全,要怎么操作
微博展开全文下的抓取
现在微博不限字数了,有很多微博总是有“展开全文”,然后以下内容不显示,不知道如何抓取展开以下的内容,请大神赐教!
微博爬取展开全文内容
我不知道怎么爬取有展开全文的内容,我的规则名称是suibe_wbfx1,恳请大佬帮我分析一下,支个招,感谢!
微博位置服务无展开全文
微博位置服务(签到采集-此地热议)无展开全文,导致部分位置信息爬取不到
【微博博文展开全部采集】#GooSeeker数据DIY#
[list] [*][b]标题[/b]:【微博博文展开全部采集】#GooSeeker数据DIY# [*][b]类别:社交[/b] [*][b]网站:[/b]微博 [*][b]采集字段:[/b]博主头像、博主id、博主、博主主页、博文、博文独立网址、发布时间、发布终端、转发数、评论数、点赞数 [*][b]DIY体验入口[/b]:[url]http://www.gooseeker.comE5%85%A8%E9%83%A8%E9%87%87%E9%9B%86[/url] [*]输入一条网址,或者点击“输入多条网址
微博评论区采集
从微博平台看一共有2k+条评论,但是采集下来只有600+是为什么呢?
微博评论区爬取
[i=s] 本帖最后由 2794244010 于 2024-2-6 19:45 编辑 [/i] 第一级任务:关键词采集微博,批量获取博文地址 第二级任务:【微博爬取第二级】根据地址运行,获取微博评论区的用户的昵称、评论文本、[b]评论中的表情但是,第二级任务获取的评论很少,不符合实际数量。每次返回修改,原先内容映射过的字段都对应错误,任务直接报错。很多次都是这个情况。
微博评论工具退出了, 会影响爬虫采集微博评论吗?
我下午下班前, 在[url=https://www.gooseeker.com/res/softdetail_6.html]微博评论工具[/url]里添加了很多任务,然后打开了爬虫的爬取窗口。第2天早晨去检查,看到微博评论工具界面退出登录了,需要重新登录。 这样会影响爬虫的爬取吗?