1321#
l947512109 新手上路 发表于 2022-1-15 16:35:36 | 只看该作者
Fuller 发表于 2022-1-15 16:13
采集哪个网址?发出来看看。是关键词搜索还是博主主页?

https://weibo.com/gugongtmall?profile_ftype=1&is_all=1#_0
是采集博主主页的所有微博,但是利用采集所有历史微博和翻页模式都不行,切成某段时间也不能采集翻页模式的……只能在单页的网址下采集仅第1页

举报 使用道具
1322#
Fuller 管理员 发表于 2022-1-16 11:31:40 | 只看该作者
l947512109 发表于 2022-1-15 16:35
https://weibo.com/gugongtmall?profile_ftype=1&is_all=1#_0
是采集博主主页的所有微博,但是利用采集所 ...

我测试了,翻页很正常,微博主页的网页很长,采集的时候,如果屏幕大,所需滚屏数量就少,如果很小的笔记本电脑,就要滚很多屏,增加了失败的机会。

你用的是这个微博博主主页采集工具吗?https://www.gooseeker.com/res/softdetail_3.html
举报 使用道具
1323#
dada1017 初级会员 发表于 2022-2-21 10:52:16 | 只看该作者
本帖最后由 dada1017 于 2022-2-21 10:53 编辑

我的输入的网址应该是符合格式的,但是为什么一直现实停止采集,是失败的意思吗?
如果http://weibo.com/u/1556888272?topnav=1&wvr=6&topsug=1&is_all=1#_0这样的格式是错误的吗加了#_0在爬数据的过程中我看爬的主页也是对的,但是采集过程中凡是采集过的都显示停止采集。
举报 使用道具
1324#
Fuller 管理员 发表于 2022-2-21 11:00:08 | 只看该作者
dada1017 发表于 2022-2-21 10:52
我的输入的网址应该是符合格式的,但是为什么一直现实停止采集,是失败的意思吗?
如果http://weibo.com/u/ ...

是否有#0不影响采集,你把这个网址加入了那个快捷采集工具?我测试一下
举报 使用道具
1325#
dada1017 初级会员 发表于 2022-2-21 11:53:59 | 只看该作者
Fuller 发表于 2022-2-21 11:00
是否有#0不影响采集,你把这个网址加入了那个快捷采集工具?我测试一下
...

那个快捷采集工具没有看到诶?? 在哪里啊? 前面用来测试的网址是这个  https://weibo.com/1618051664?profile_ftype=1&is_all=1#_0

举报 使用道具
1326#
Fuller 管理员 发表于 2022-2-21 14:40:20 | 只看该作者
dada1017 发表于 2022-2-21 11:53
那个快捷采集工具没有看到诶?? 在哪里啊? 前面用来测试的网址是这个  https://weibo.com/1618051664?p ...

这个是微博博主主页信息,你是要采集他发的所有微博吗?博主主页采集工具界面上有3个选择项,有一个选择项专门采集全部微博
举报 使用道具
1327#
Fuller 管理员 发表于 2022-2-21 14:41:45 | 只看该作者
加入这个qq群:472442022 ,那里有技术指导,随时帮你解决问题
举报 使用道具
1328#
dada1017 初级会员 发表于 2022-2-21 17:49:23 | 只看该作者
Fuller 发表于 2022-2-21 14:41
加入这个qq群:472442022 ,那里有技术指导,随时帮你解决问题

好的!! 谢谢你~
举报 使用道具
1329#
KSKOISK 新手上路 发表于 2022-2-26 21:31:52 | 只看该作者
采集同时包含关键词A与关键词B的微博格式是”A,B“吗,为啥结果是只包含A的微博呢?
举报 使用道具
1330#
Fuller 管理员 发表于 2022-2-27 10:46:18 | 只看该作者
KSKOISK 发表于 2022-2-26 21:31
采集同时包含关键词A与关键词B的微博格式是”A,B“吗,为啥结果是只包含A的微博呢?
...

用双引号把两个词括起来试试。微博有自己的搜索策略,估计还是会出现只出现其中一个词的情况。我建议导出excel文件以后,在excel中进行过滤
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 集搜客分词软件的选词矩阵在哪里下载?
  • 为什么用微软的excel无法打开xls文件?powe
  • 360或火绒等杀毒软件导致GooSeeker爬虫软件
  • 话题分析(NMF模型和LDA模型)软件的安装和
  • 运行Apple无法验证的程序的方法

热门用户

GMT+8, 2025-12-12 06:23