indiegogo网站上抓取项目当前时间如何进行
某个项目网址https://www.indiegogo.com/projec ... /18900174#/comments
用于了解评论区和更新区的时间标准
举报 使用道具
| 回复

共 4 个关于本帖的回复 最后回复于 2018-12-9 12:52

沙发
Fuller 管理员 发表于 2018-12-8 22:50:24 | 只看该作者
你说的项目当前时间是在哪个地方
举报 使用道具
板凳
DuoRuaiMi 高级会员 发表于 2018-12-9 10:06:53 | 只看该作者
Fuller 发表于 2018-12-8 22:50
你说的项目当前时间是在哪个地方

在网页中没找着,但是我想知道可不可以得到抓取的时候那个时间,因为项目下面的评论更新时间显示的是几个小时前,几天前,我需要的数据是准确时刻。



本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
地板
Fuller 管理员 发表于 2018-12-9 11:08:26 | 只看该作者
DuoRuaiMi 发表于 2018-12-9 10:06
在网页中没找着,但是我想知道可不可以得到抓取的时候那个时间,因为项目下面的评论更新时间显示的是几个 ...

在抓取结果文件中,有<createdate>2018-12-09 18:30:54</createdate>这样的字段,这个字段是自动添加到结果文件中的,不是你定义的抓取内容。用这个createdate减去抓取到的时间(如,9小时前,就要减去9小时),就是当时的时间。

这个运算爬虫不做,需要你处理抓取结果的时候做,比如,在excel中做时间相减
举报 使用道具
5#
DuoRuaiMi 高级会员 发表于 2018-12-9 12:52:35 | 只看该作者
Fuller 发表于 2018-12-9 11:08
在抓取结果文件中,有2018-12-09 18:30:54这样的字段,这个字段是自动添加到结果文件中的,不是你定义的 ...

好的,谢谢
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 为BERTopic安装需要的预训练SBERT模型
  • 在什么情况下使用弹窗模式和回退功能?
  • 爬网址做层级采集——以当当商品爬虫为例
  • 网络爬虫采集列表数据
  • UMAP的min_dist参数有什么作用?

热门用户

GMT+8, 2026-9-28 20:08