我发现爬取24年以前的,比如23、22年,只要爬取一个月之后推特页面就没有了。有没有大哥答疑一下,或者说是我梯子、账号的问题?但是我爬24年的1-8月份就都能爬取下来
举报 使用道具
| 回复

共 7 个关于本帖的回复 最后回复于 2024-8-11 10:44

沙发
Fuller 管理员 发表于 2024-8-8 17:07:30 | 只看该作者
搜索的时候有没有使用twitter网页上的高级搜索?
举报 使用道具
板凳
chemical 初级会员 发表于 2024-8-8 17:30:09 | 只看该作者
Fuller 发表于 2024-8-8 17:07
搜索的时候有没有使用twitter网页上的高级搜索?

就是在这里面设置的呀

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
地板
Fuller 管理员 发表于 2024-8-8 17:38:46 | 只看该作者
chemical 发表于 2024-8-8 17:30
就是在这里面设置的呀

是否选择了起止时间?
举报 使用道具
5#
chemical 初级会员 发表于 2024-8-8 18:05:18 | 只看该作者
Fuller 发表于 2024-8-8 17:38
是否选择了起止时间?

设置的是2023年1月1日到2023年12月31日,设置了好几次,间隔都是好几个月,但是每次都是爬完一个月,准备到下一个月了就搜索不到了。不是卡了加载不出来的那种,就是完全没有了好像已经到底的感觉
举报 使用道具
6#
Fuller 管理员 发表于 2024-8-8 22:03:50 | 只看该作者
再把时间间隔设置的小一些试试
举报 使用道具
7#
chemical 初级会员 发表于 2024-8-11 10:04:13 | 只看该作者
Fuller 发表于 2024-8-8 22:03
再把时间间隔设置的小一些试试

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
8#
Fuller 管理员 发表于 2024-8-11 10:44:12 | 只看该作者

这种情况就采集不到数据了,twitter可能有过滤策略,以前的内容会比较多地过滤掉不显示
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 怎样设置LDA模型的超参数alpha(α)和beta(
  • LDA主题分析模型到底是什么?
  • top2vec话题发现原理和使用方法
  • 将文本聚类和LDA分析模块安装在数据盘上的
  • GooSeeker分词软件的tf-idf算法和特征词选

热门用户

GMT+8, 2026-4-17 06:04