MongoDB根据时间aggregate示例

需要对下面的集合根据LastUpdate按天分组累加TranslateFields值。

rs_test:SECONDARY> db.new_result.find();   
{ "_id" : ObjectId("57fb0756e31f84a56ed41889"), "LastUpdate" : ISODate("2016-09-02T01:35:02.471Z"), "TranslateFields" : 9 }    
{ "_id" : ObjectId("57fb0756e31f84a56ed4188a"), "LastUpdate" : ISODate("2016-09-05T11:13:28.344Z"), "TranslateFields" : 10 }    
{ "_id" : ObjectId("57fb0756e31f84a56ed4188b"), "LastUpdate" : ISODate("2016-09-05T09:26:41.016Z"), "TranslateFields" : 33 }    
{ "_id" : ObjectId("57fb0756e31f84a56ed4188c"), "LastUpdate" : ISODate("2016-09-02T13:34:50.114Z"), "TranslateFields" : 12 }    
{ "_id" : ObjectId("57fb0756e31f84a56ed4188d"), "LastUpdate" : ISODate("2016-08-26T03:49:52.369Z"), "TranslateFields" : 17 }

如果是在SQL Server里,分组统计应该像这样写:

SELECT CONVERT(varchar,LastUpdate,112),SUM(TranslateFields)
  FROM dbo.new_result
  GROUP BY CONVERT(varchar,LastUpdate,112)
  ORDER BY 1;

那么在MongoDB里,有3种聚合方法:group、aggregate和mapReduce

//2.6版本aggregate方法   
db.new_result.aggregate(    
      {    
        $group : {    
           _id : { year: { $year: "$LastUpdate" }, month: { $month: "$LastUpdate" }, day: { $dayOfMonth: "$LastUpdate" } },    
           totalTime: { $sum: "$TranslateFields" }    
        }    
      },    
      {    
        $sort : {    
           "_id.year": 1, "_id.month": 1, "_id.day": 1    
        }    
      }    
)
//3.0版本aggregate方法   
db.new_result.aggregate(    
      {    
        $group : {    
           yearMonthDay: { $dateToString: { format: "%Y-%m-%d", date: "$LastUpdate" } },    
           totalTime: { $sum: "$TranslateFields" }    
        }    
      },    
      {    
        $sort : {    
           "yearMonthDay": 1    
        }    
      }    
)
//group方法   
db.new_result.group({    
 keyf : function(doc){    
  var date = new Date(doc.LastUpdate);    
  var dateKey = ""+date.getFullYear()+"-"+(date.getMonth()+1)+"-"+date.getDate();    
  return {‘day‘:dateKey};    
},     
 initial : {"time":0},     
 reduce : function(doc, prev){    
        prev.time += doc.TranslateFields;    
    },     
 finalize : function Finalize(out) {    
    return out;    
}    
}    
});
//先存为日期    
//1    
db.tmp_result.find({"value.Status":3},{"value.TranslateFields":1,"value.LastUpdate":1}).forEach(    
    function(item){    
         db.new_result.save({"LastUpdate":item.value.LastUpdate.getFullYear()+"-"+    
             (item.value.LastUpdate.getMonth()+1)+"-"+    
             item.value.LastUpdate.getDate(),    
             "TranslateFields":item.value.TranslateFields});    
    }    
 )    
//2    
db.new_result.aggregate(    
      {    
        $group : {    
           _id:"$LastUpdate",    
           totalTime: { $sum: "$TranslateFields" }    
        }    
      }    
     ,{"$sort":{"_id":1}}    
)

对于aggregate方法,最好在$group之前$match,减少数据量,如果过滤的键上有索引,查询也会走索引。

db.TranslateTicket.aggregate(    
{    
    "$match":    
    {    
         "LastUpdate": {"$gte":ISODate("2016-06-19T00:00:00.000Z"), "$lt":ISODate("2016-09-19T00:00:00.000Z")},    
         "Status": 3    
    }    
},    
{    
    "$group":    
    {    
      _id : { month: { $month: "$LastUpdate" }, day: { $dayOfMonth: "$LastUpdate" }, year: { $year: "$LastUpdate" } },    
     totalTime: { $sum: "$CharactersCount" }    
    }    
},    
{    
    "$sort":    
    {    
        "_id.year":1,"_id.month":1,"_id.day":1    
    }    
}    
)

这种情况,最好在创建如下索引:

db.TranslateTicket.createIndex({“LastUpdate”:1,”Status”:1},{background:1})
时间: 2024-10-13 15:59:17

MongoDB根据时间aggregate示例的相关文章

关于mongodb插入时间不正确的问题

关于mongodb插入时间不正确的问题 mongodb插入时间: 把本地时间转换为utc时间:  也就是比本地时间少8个小时: 读取的时候又会转换本地时间: 所有一般不需处理: 关于mongodb插入时间不正确的问题,布布扣,bubuko.com

mongodb 按照时间聚类 java

当存储到mongodb中的是string类型的时间,小tips: 1. 那么在对此域按照时间聚类(每周,每月)时就不能直接使用mongodb的time关键字了,因为mongodb有自己的时间类型,且目前它只认可自己的时间类型. 2. 假如对于时间进行简单的聚类,比如按照年,月,日,时,分,秒来聚类,我们可以使用mongodb的substr关键字模拟出mongodb能够认可的时间类型. 比如 2015-03-02 22:53:45 ---> 2014 这样截取出year,2014-03-02就是截

[Mongo]分组统计时间 aggregate,group,distinct

开发中有些按日期记录的记录需要各种维度的统计,按天,按月,按年,按小时,..分组统计,还有些需要对字段去重统计,在之前的 [Mongo] 按时间分组统计(group时间格式化)  中用group实现了按天的统计,不过使用new Date()方法会有些坑,今天看了下aggregate中,使用聚合来写个时间统计. tips: aggregate 挺复杂,弄明白了再做笔记,现在只是根据需求来查询. 数据结构还是: /* 0 */ { "_id" : ObjectId("541fcc

mongodb按照时间分组统计

使用spring data mongodb v1.8 需求1. 数据结构如下.说明:改集合记录的是公司各个系统的访问情况(localPath表示系统,requestTime 表示请求时间,字符串类型,) 需求:选中某一天,然后按照系统和小时进行分组,统计这一天中每个小时各个系统的访问情况. 业务代码: Criteria criteria = new Criteria(); criteria.andOperator(Criteria.where("createTime").lt(Date

mongoDB 入门指南、示例

一.准备工作 1. 下载mongoDB 下载地址:http://www.mongodb.org/downloads 选择合适你的版本 相关文档:http://www.mongodb.org/display/DOCS/Tutorial 2. 安装mongoDB A. 不解压模式: 将下载下来的mongoDB-xxx.zip打开,找到bin目录,运行mongod.exe就可以启动服务,默认端口27017,db保存的路径是系统C硬盘目录的根目录的/data/db目录.也就是说,如果你的mongoDB-

mongodb配置及简单示例

安装 在官网下载安装 https://www.mongodb.com/ 配置 我的电脑—>右键属性—>左边列表中的高级程序设置—>环境变量 点击path 把你的mongodb文件路径放到下面的行中 默认路径:C:\Program Files\MongoDB\Server\3.2\bin 放入里面点击确定即可 注意(在c盘根目录中新建data文件夹,再在data文件夹中新建db,用于盛放mongodb的数据) 配置 打开cmd 先用path命令查看下,如图MongoDB已经成功加入 在用m

erlang处理mongodb日期时间格式data类型

在项目中,mongo中要创建日期类型,根据这个日期类型进而对mongo设置过期时间自动删除.而mongo中的日期类型,使用ISO格式,例如:ISODate("2012-11-02T07:58:51.718Z") 在java中,例如: db.tianyc04.insert({mark:1, mark_time:new Date()}) ,一个new Date() 直接轻松搞定, 看到 { "_id" : ObjectId("5126e00939899c4cf

MongoDb C# 驱动操作示例

c#操作mongo数据库 驱动采用http://www.oschina.net/p/mongo-csharp-driver C#驱动的基本数据库连接,增删改查操作 //定义对象 public class Person { public ObjectId _id; public string Name { get; set; } public int Age { get; set; } public override string ToString() { return string.Format

[DevExpress]ChartControl之时间轴示例

关键代码: using System; using System.Data; using System.Windows.Forms; using DevExpress.XtraCharts; namespace DevExpressChart { public partial class winDateTime : Form { public winDateTime() { InitializeComponent(); } private void winDateTime_Load(object