请问一下如何进行微博正文下某一评论回复及其爬取,不需要爬取全部的评论及回复?该怎么设置?
另外,可不可以爬取所有出现某关键词的评论及回复?

举报 使用道具
| 回复

共 6 个关于本帖的回复 最后回复于 2020-7-23 15:57

沙发
内容分析应用 金牌会员 发表于 2020-7-22 17:54:36 | 只看该作者
爬取时网页已经打开了, 常用做法是把能抓的内容抓下来, 后续在excel或数据库里进行筛选
举报 使用道具
板凳
Fuller 管理员 发表于 2020-7-22 18:37:22 | 只看该作者
在爬评论过程中,不能根据关键词进行筛选,把所有评论爬下来以后,在excel中利用关键词筛选功能
举报 使用道具
地板
Fuller 管理员 发表于 2020-7-22 18:39:21 | 只看该作者
这是微博采集工具箱中的爬微博评论的工具,在这个工具界面上,输入一条微博正文的网址,点击启动采集,就能把爬虫运行起来:https://www.gooseeker.com/res/softdetail_6.html
举报 使用道具
5#
刘晶晶 初级会员 发表于 2020-7-23 15:21:34 | 只看该作者
内容分析应用 发表于 2020-7-22 17:54
爬取时网页已经打开了, 常用做法是把能抓的内容抓下来, 后续在excel或数据库里进行筛选 ...

好的,谢谢您。再向您请教一个问题,如果我想抓取所有微博下的某一评论及回复应该怎么做呢?
举报 使用道具
6#
刘晶晶 初级会员 发表于 2020-7-23 15:22:23 | 只看该作者
Fuller 发表于 2020-7-22 18:37
在爬评论过程中,不能根据关键词进行筛选,把所有评论爬下来以后,在excel中利用关键词筛选功能 ...

好的,谢谢您。再向您请教一个问题,如果我想抓取所有微博下的某一评论及回复应该怎么做呢?
举报 使用道具
7#
scraper 论坛元老 发表于 2020-7-23 15:57:03 | 只看该作者
刘晶晶 发表于 2020-7-23 15:22
好的,谢谢您。再向您请教一个问题,如果我想抓取所有微博下的某一评论及回复应该怎么做呢?
...

在微博评论和回复采集界面上输入微博的独立网址可以采集评论及其回复
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • LDA主题分析模型到底是什么?
  • top2vec话题发现原理和使用方法
  • 将文本聚类和LDA分析模块安装在数据盘上的
  • GooSeeker分词软件的tf-idf算法和特征词选
  • 边表格式和矩阵格式的共词矩阵表有什么区别

热门用户

GMT+8, 2026-4-9 00:09