关于MongoDB时间格式转换和时间段聚合统计的用法总结

作者: 东山絮柳仔

一 . 背景需求

在日常的业务需求中,们往往会根据时间段来统计数据。例如,统计每小时的下单量;每天的库存变化,这类信息数据对运营管理很重要。

这类数据统计依赖于各个时间维度,年月日、时分秒都有可能。因为需求变化多样,并且表的设计有严格的规范,们不可能将订单的下单时间分别拆分存储到 年、月、日、时、分、秒、毫秒列(字段)中。在实际应用中,们一般都是通过转换函数进行时间转换的。

大家可能对关系型数据库(例如,SQL Server、MySQL)中的时间转换函数和依据时间段进行聚合操作比较熟悉了,但是对MongoDB中的时间转换和依据时间聚合比较陌生。所以,们有必要花费一定时间进行梳理学习一下,拓展丰富自己的知识。

二 . SQL Server数据库关于时间的转换和聚合

为了清楚的了解这类需求,了解时间转换和统计,们先从大家熟悉的SQL Server 入手。例如,们将时间数据存储为datetime类型。

首先,回顾下SQL Server的时间转换函数。 1.通过YEAR(),MONTH(),DAY() 获取年月日数据。

2.通过DATEPART() 函数 返回日期/时间的单独部分,比如年、月、日、小时、分钟等等。

3.datename () 返回代表指定日期的指定日期部分的字符串。此函数与DATEPART() 类似。

此外,还可以通过convert() 等函数进行转换,再次不再赘述。 通过这些函数,们可以进行时间格式的转换,在转换函数的基础上,可以进行时间段内数据量的统计。

例如:基于DATEPART() 函数 统计2017-10-10到2017-11-10表中每天的数据量。

也可以基于convert() 函数进行统计

三 . MongoDB 数据库关于时间的转换和聚合

以上操作是在SQL Server上进行,如果在MongoDB中,应该借助什么的函数进行类似的转换和统计呢?

如果查看显示 各种格式的时间,可以通过 $dateToString 进行转换。

例如通过转换函数$dateToString,将集合temp_MongoDateTime中的字段Rec_CreateTime转换为 年 字段、月 字段、日 字段、年-月-日、和 时:分:秒:毫秒 字段

代码为: db.temp_MongoDateTime.aggregate( [ { $project: { “_id”:0, “Rec_CreateTime”:1, Year: }, Month: }, Day: }, yearMonthDay: { $dateToString: { format: “%Y-%m-%d”, date: “$Rec_CreateTime” } }, Time: } } } ] )

查询效果如下:

除了$dateToString转换函数外,MongoDBDB 还有获取年月日、时分秒的函数,甚至还提供了处于一年中的多少天,一周的第几天等。

主要函数为$year、$month、$dayOfMonth、 $hour、$minute、$second、$dayOfYear、$dayOfWeek 等。

们直接看下面的例子好了。执行代码: db.temp_MongoDateTime.aggregate( [ { $project: { “_id”:0, “Rec_CreateTime”:1, year: , month: , day: , hour: , minutes: , seconds: , milliseconds: , dayOfYear: , dayOfWeek: , week: * } } ] )*

上面的2个例子都是时间转换,如果按照时间段集合统计数据呢?其实基于上面的时间转换函数,借助MongoDB的聚合框架,同样可以轻松实现。

例如统计1-12 月份,每个月份的数据量,即那个月是旺季。此时基于时间转换函数 $month执行代码如下: db.temp_MongoDateTime.aggregate( [ { $match: }, { $group:, count:} } ] )

查询效果如下:

上面的数据显示:集合中的记录按月聚合,10月份有341笔;9月份有48笔。其中字段_id 代表了月份。

们再举一个例子,例如统计 集合temp_MongoDateTime2016-10-05 05:51:50 到 2018-10-06 05:51:50 这段时间内**,0-24 小时内,每小时的分布情况。即,每天那个时辰(小时)下单量比较多。

此时基于时间转换函数 $hour ,代码如下: db.temp_MongoDateTime.aggregate( [ { $match:{ “Rec_CreateTime”:{$gte:ISODate(“2016-10-05 05:51:50”),$lte:ISODate(“2018-10-06 05:51:50”)} } }, {$group:{ _id:, count: } } ] )

查询结果显示如下:

再举一个关于时间聚合统计的例子,这个例子是基于时间转换函数$dateToString

例如统计每天的数据量,即每天的数据分布情况。这个每天是按 年-月-日统计分布的。

代码如下: db.temp_MongoDateTime.aggregate( [ { $match:{ “Rec_CreateTime”:{$gte:ISODate(“2016-10-05 05:51:50”),$lte:ISODate(“2018-10-06 05:51:50”)} } }, {$group:{ _id: }, count: } } ] )

查询效果显示如下:

四 . 总结

和关系型数据库 SQL Server 一样,MongoDB数据库通过自身的时间转换函数,例如, $dateToString、$year、$month、$dayOfMonth、 $hour、$minute、$second、$dayOfYear、$dayOfWeek等,也可以轻松实现时间转换和基于时间段的聚合统计。 本文版权归作者所有,未经作者同意不得转载,谢谢配合!!!

原文创作:东山絮柳仔

原文链接:https://www.cnblogs.com/xuliuzai/p/9802869.html

文章列表

更多推荐

更多
  • Linux基础知识-五、更高级的命令行和概念 基本网络概念,安装新软件和更新系统,服务介绍,基本系统故障排除和防火墙,引入 ACLs,setuid、setgid 和粘性位,设置用户标识符,塞吉德,粘性比特,摘要, 在本章中,我们将了解以下内容:基本网络概念安装新
  • Linux基础知识-三、Linux 文件系统 理解文件系统,使用文件链接,搜索文件,与用户和组一起工作,使用文件权限,使用文本文件,使用 VIM 文本编辑器,摘要, 在前一章中,我们通过导航文件系统向您介绍了 Linux 文件和文件夹。在本章中,我们将学习如何使用、查找和更改读取和
  • Linux基础知识-四、使用命令行 基本的 Linux 命令,附加程序,网络工具,Nmap(消歧义),链接,iotop,iftop,快上来,lsof,理解过程,克隆,信号,杀,障碍,使用 Bash Shell 变量,Bash shell 脚本介绍,实现 Bash Shel
  • Linux基础知识-二、Linux 命令行 介绍命令行,文件环球化,引用命令,寻求帮助,使用 Linux Shell,理解标准流,理解正则表达式,与 sed 合作,使用 awk,浏览 Linux 文件系统,摘要, 在本章中,我们将向您介绍开始使用 Linux 命令行时最基本的概念
  • Linux基础知识-一、Linux 简介 Linux 系统概述,虚拟化,安装 VirtualBox 和 CentOS,使用 VirtualBox,通过 SSH 连接虚拟机,摘要, 一个操作系统 ( 操作系统)是一个运行在你的电脑上的特殊软件,它使得启动和运行微软
  • Linux基础知识-零、前言 这本书是给谁的,这本书涵盖了什么,充分利用这本书,下载彩色图像,使用的约定,取得联系,复习, 在这本书里,目标是建立一个坚实的基础,学习 Linux 命令行的所有要点,让你开始。它被设计成非常专注于只学习实用的核心技能和基本的 Linu
  • Java8反应式编程指南-六、使用调度器获得并发性和并行性 RxJava 的调度器,缓冲、节流和去抖动,调试可观察对象及其调度器,可观察的间隔及其默认调度程序,调度器的类型,将可观察对象和调度器相结合,平行性,节流,去抖动,缓冲器和窗口操作器,背压操作人员,调度器。即时调度器,调度员。蹦床调度员
  • Java8反应式编程指南-七、测试 RxJava 应用 使用简单订阅进行测试,阻塞可观测类,聚合运算符和 BlockingObservable 类,使用聚合运算符和 BlockingObservable 类进行测试,使用 TestSubscriber 类进行深入测试,借助 TestSched
  • Java8反应式编程指南-八、资源管理与 RxJava 扩展 资源管理,使用 Observable.cache 缓存数据,使用升降机创建自定义操作员,使用 Observable.compose 运算符组合多个运算符,介绍可观察的使用方法, 通过前面的章节,我们已经学习了如何使用 RxJava
  • Java8反应式编程指南-五、组合器、条件和错误处理 结合可观察实例,条件运算符,处理错误,HTTP 客户端示例,拉链操作员,组合测试操作符,合并运算符,concat 操作员,电磁轴承操作员,takeUntil、takeWhile、skipUntil和 skipWhile条件运算符,def
  • 近期文章

    更多
    文章目录

      推荐作者

      更多