周煦辰 2016-01-16
来说说MongoDB中的数据聚合工具。
Aggregate是MongoDB提供的众多工具中的比较重要的一个，类似于SQL语句中的GROUP BY。聚合工具可以让开发人员直接使用MongoDB原生的命令操作数据库中的数据，并且按照要求进行聚合。聚合不仅极大提升了开发的效率，更重要的是，原生的工具运行效率比自己写聚合的方法高到不知道哪里去了。
下面简单说一下PHP开发环境下如何使用MongoDB的数据聚合工具 Aggregation Pipleline和Group。其实PHP下的MongoDB使用和原生差不多，无非是语法从JavaScript变成了PHP而已，大致的操作流程是差不多，命令的格式也是非常相像的。基本上只要会看MongoDB的文档，就能通过PHP操作MongoDB了。
Aggregation Pipleline
关于Aggregation，官方文档在这里。我这里就半翻译半扯淡(当然大部分是扯淡)说一下Aggregation Pipleline。
管道的概念
管道在*nix中将上一个命令输出的数据作为下一个命令的参数。MongoDB中的管道操作是可以重复的，基于这个概念，MongoDB中的管道聚合可以有非常实用的玩法，比如对聚合的结果进行排序。
那么，如何使用呢
借用一下官方的图，这里aggregate的命令为：
[
{$match: {status: "A"}},
{$group: {_id: "$cust_id", total: {$sum: "$amount"}}}
]aggreagte是一个数组，其中包含多个对象(命令)，通过遍历Pipleline数组对collection中的数据进行操作。
解释一下例子中的配置项意思。
$match：查询条件
经常使用正则表示的人肯定对match不陌生，很明显$match是配置查询数据时的条件。这里的语法和查询数据库的时候一毛一样，也就不再赘述了，看一下MongoDB的CRUD文档即可。
$group：聚合的配置
_id代表你想聚合的数据的主键，例如上述数据中，你想聚合所有cust_id相同的条目的amount的总和，那_id即被设置为cust_id。_id为必须，但是你可以填写一个空值。
total代表你最后想输出的数据之一，这里total是每条结果中amount的总和。
$sum是一个聚合的操作符，另外的操作符你可以在官方文档中找到。上图中的命令表示对相同主键(_id)下的amount进行求和。如果你想要计算主键出现的次数，可以把命令写成如下的形式
{$sum: 1}
聚合的过程
看一下图例，所有的数据先经过$match命令，只留下了status为A的数据，接着，对筛选出的数据进行聚合操作，对相同cust_id的数据进行计算amount总和的操作，最后输出结果。
其他管道表达式与操作符
其他的管道表达式和操作符都可以在官方文档中找到。
这里说一下$sort操作符。前面说过，利用管道的特性，可以做到对结果进行排序。所以只需要在$group操作之后使用$sort操作即可，这点在报表的制作上十分实用。况且使用MongoDB对结果进行排序也可以尽量优化性能。
Group
MongoDB另一个重要的聚合工具就是Group，所不同的是，Aggregate操作中，传入的Pipleline是一个包含多个对象的数组，每一个对象代表了一个命令。而Group有传入的命令中共有六个参数，其中三个……是JavaScript函数，因此每次查询到匹配的数据，都会被转换为对象传入函数。从运行效率上来说，Group肯定比Aggregate差一大截。但是Group的优势在于灵活，因为配置项可以通过自己编写函数来实现。但是需要注意的是，尽管这样做看起来非常灵活方便，但是一旦函数复杂度过大，将大大影响Group的性能，因此个中取舍还需要自己定夺。
那么，怎么用呢
从我个人来说，用得最多的是key、cond、$reduce、inital这四个命令。
使用上面Aggregation Pipleline中的数据为例。
key：其实和上边说的Aggregation Pipleline中的_id是一样的。假设这里是{cust_id: 1}
cond：和上边说的$match是一样的。
$reduce：一个函数，对匹配到的数据进行操作，这个放在后面说。
initial：初始数据，假设我们这里是{count: 0}。
$reduce：
function(obj, prev) {
prev.count += obj.amount;
}$reduce的函数(还是匿名的)可以传入两个参数，第一个是被转换为对象的条目，第二个是被实例化的initial对象。
最后的结果和Aggregate操作的一样：
{
retval: [
{
cust_id: "A123",
count: 750
},
{
cust_id: "B212",
count: 200
}
],
count: 3,
keys: 2,
ok: 1
}那么，PHP里面应该怎么用呢
PHP中的Mongo操作和原生的使用JavaScript操作非常像。例如第一个例子的代码如下：
$mongo = new MongoClient(DB_CONNECT);
$db = $mongo->db;
$collection = $db->selectCollection('orders');
$pipleline = array(
array(
'$match' => array(
'status' => array(
'$eq' => 'A',
),
),
),
array(
'$group' => array(
'_id' => '$cust_id',
'total' => array(
'$sum' => '$amount',
),
),
),
);
$a = $collection->aggregate($pipleline);
$result = isset($a['result']) ? $a['result'] : array();第二个例子的代码如下
$mongo = new MongoClient(DB_CONNECT);
$db = $mongo->db;
$collection = $db->selectCollection('orders');
$keys = array('cust_id' => 1);
$initial = array('count' => 0);
$reduce = 'function(obj, prev) {prev.count += obj.amount;}';
$cond = array('condition' => array('status' => 'A'));
$g = $collection->group($keys, $initial, $reduce, $cond);
$retval = isset($g['retval']) ? $g['retval'] : array();其他的功能，需要自己多参考PHP官方文档和Mongo的文档进行尝试了。
MongoDB中聚合工具Aggregate等的介绍与使用
Aggregate是MongoDB提供的众多工具中的比较重要的一个,类似于SQL语句中的GROUP BY.聚合工具可以让开发人员直接使用MongoDB原生的命令操作数据库中的数据,并且按照要求进行聚合 ...
使用highcharts显示mongodb中的数据
1.mongodb数据表相关 # 显示数据库 show dbs # 数据库 use ceshi # 显示表 show tables # 创建集合 db.createCollection('infoB' ...
MongoDB中导入数据命令的使用(mongoimport)
MongoDB中导入数据命令的使用(mongoimport) 制作人:全心全意 语法: mongoimport 介绍: 该命令可以将CSV,T ...
用java在客户端读取mongodb中的数据并发送至服务器
使用Java自带的socket端口来实现,程序如下: Client.java package com.cn.gao; import java.net.*; import java.io.*; impo ...
PHP 从 MongoDb 中查询数据怎么样实现
一.软件环境(版本非必须) php v5.6 扩展:MongoDB nginx v1.11 mongodb v3.2 note: 必须安装MongoDB扩展 二.连接 $client = new Mo ...
2.(group by)如何让分组后，每组中的数据按时间倒序排列(group by和 order by的分组按排列)
比如说有表devicedata: 问题: 现在我想将devicedata这个表中的数据,先按device_id这个字段分组,然后每组中的数据按时间字段ts从大到小的排列, 如何解决呢? 错误的sql: ...
使用C#对MongoDB中的数据进行查询，改动等操作
首先,使用的是官方提供的C#訪问组件https://github.com/mongodb/mongo-csharp-driver 然后.编译后引用MongoDB.Bson.dll及MongoDB.Dr ...
Java对MongoDB中的数据查询处理
Java语言标准的数据库时MySQL,但是有些时候也会用到MongoDB,这次Boss交代处理MongoDB,所以讲代码以及思路记录下了 摸索的过程,才发现软件的适用还是很重要的啊!!! 我连接的Mo ...
如何在Mongodb中实现数据超时自动删除功能？
在工作过程中,我们难免会遇到这样的问题,我们想保存一些数据,但是我们对这些数据的要求并不高,有时候往往只是想要某个时间范围内的数据,比如我们如果永远只关心从当前时间往前推半年内的数据特性,那么我们就不 ...
随机推荐
Linux内核同步机制
Linux内核同步控制方法有很多,信号量.锁.原子量.RCU等等,不同的实现方法应用于不同的环 ...
26种提高ASP.NET网站访问性能的优化方法 .
1. 数据库访问性能优化 数据库的连接和关闭 访问数据库资源需要创建连接.打开连接和关闭连接几个操作.这些过程需要多次与数据库交换信息以通过身份验证,比较耗费服务器资源. ASP.NET中提供了连接池 ...
LeetCode_Reverse Linked List II
Reverse a linked list from position m to n. Do it in-place and in one-pass. For example: Given -> ...
REF CURSOR和CURSOR
REF CURSOR DECLARE TYPE TY_EMP_CUR IS REF CURSOR; V_Emp_Cur TY_EMP_CUR; V_Id EMP.ID%TYPE; BEGIN OPEN ...
利用 DynamicLinq 实现简单的动态表达式构建查询
平时使用 LINQ 进行一些简单的条件拼接查询一般都会这样操作: public class SearchInputDto { public string ConditionA { get; set; ...
Ubuntu 14.04循环登录问题(密码正确，无法登录)
今天遇到了ubuntu 的循环登录问题,即使输入的密码是正确的,也无法成功登录.查询资料,发现有各种问题引起的循环登录问题,比如安装了jdk,或者安装了驱动. 最后找到了问题的原由:我的电脑是双显卡, ...
PHP字符串替换函数
str_replace函数 描述:实现字符串替换,区分大小写 语法:mixed str_replace(mixed $search, mixed replace, mixed $subject, [i ...
【转】Python判断字符串是否为字母或者数字
str_1 = " str_2 = "Abc" str_3 = "123Abc" #用isdigit函数判断是否数字 print(str_1.isdi ...
环境变量的配置-java-JMETER - 【Linux】
rz上传 lz下载 步骤: . Linux下首先安装Jdk: . 下载apache-jmeter-4.0.tgz,复制到Linux系统中的/opt目录下: . 解压apache-jmeter-4.0. ...
PHP创建文件以及移动文件
创建文件,这里用到的是fopen,即是打开,又是创建 <?php $counter_file = 'aa.txt ';//文件名及路径,在当前目录下新建aa.txt文件 $fopen = fop ...
