1.基本查询： (1)我只想查询某个表的某列时：SELECT col1,col2 from table1过滤掉不要的列字段; (2)我想查询某行的信息时：使用where col1=1 and col2=2来过滤掉不要的行; (3)我们可以使用group by来aggregate 数据，汇总时，显示的 ...
分类：
数据库 时间：
2016-07-21 19:28:04
阅读次数：
220
fold和reduce都要求函数的返回值类型需要和我们所操作的RDD类型相同，但是我们有时确实需要一个不同类型的返回值。eg: 在计算平均值时，需要记录便利过程中的计数以及元素的数量，这就需要我们返回一个二元组。可以先对数据使用map操作，来把元素转移为改元素和1的二元组，也就是我们希望的返回类型。 ...
分类：
其他好文 时间：
2016-06-26 15:18:49
阅读次数：
350
1、count统计结果错误 这是由于分布式集群正在迁移数据，它导致count结果值错误，需要使用aggregate pipeline来得到正确统计结果，例如： 引用：“On a sharded cluster, count can result in an inaccurate count if o ...
分类：
数据库 时间：
2016-06-02 11:06:49
阅读次数：
314
合计函数 (比如 SUM) 常常需要添加 GROUP BY 语句。 GROUP BY 语句 GROUP BY 语句用于结合合计函数，根据一个或多个列对结果集进行分组。 SQL GROUP BY 语法 SELECT column_name, aggregate_function(column_name... ...
分类：
数据库 时间：
2016-06-01 13:03:11
阅读次数：
202
HAVING 子句 在 SQL 中增加 HAVING 子句原因是，WHERE 关键字无法与合计函数一起使用。 SQL HAVING 语法 SELECT column_name, aggregate_function(column_name) FROM table_name WHERE column_ ...
分类：
数据库 时间：
2016-05-31 18:47:26
阅读次数：
203
本篇文章继续介绍以下类型的操作符
- Mathematical and Aggregate Operators(Observable数学运算及聚合操作符)一、Concat
Concat操作符将多个Observable结合成一个Observable并发射数据，并且严格按照先后顺序发射数据，前一个Observable的数据没有发射完，是不能发射后面Observable的数据的。...
分类：
移动开发 时间：
2016-05-27 12:41:56
阅读次数：
369
资源的需求是随着业务的发展逐步增加的，而在网络规范之初，为了节省资金，我们只会在IDC申请少量的机柜；随着业务扩张，需求增加，老区域可能没有空闲的机柜资源了，只能在机房临近的区域申请机柜，这样就会存在多个外网上行端口。为了方便流量的直观监控，我们就需要把多个外..
分类：
其他好文 时间：
2016-05-24 22:57:40
阅读次数：
3006
在之前的两篇文章Mongodb中数据聚合之基本聚合函数count、distinct、group
>和Mongodb中数据聚合之MapReduce
>中，我们已经对数据聚合提供了两种实现方式，今天，在这篇文章中，我们讲讲在Mongodb中的另外一种数据聚合实现方式——聚合管道aggregate。
面对着广大用户对数据统计的需求，Mongodb从2.2版本之后便引入了新的功能聚合框架（a...
分类：
数据库 时间：
2016-05-22 12:13:49
阅读次数：
261
本篇接着讲解RDD的API，讲解那些不是很容易理解的API，同时本篇文章还将展示如何将外部的函数引入到RDD的API里使用，最后通过对RDD的API深入学习，我们还讲讲一些和RDD开发相关的scala语法。 1) aggregate(zeroValue)(seqOp,combOp) 该函数的功能和r ...
系统瓶颈分析 一、系统瓶颈分析示例 例1： 交易的响应时间如果很长，远远超过系统性能需求，表示消耗CPU的数据库操作，例如排序、执行aggregate functions（例如sam、min、max、count）等较多，可以考虑是否有索引以及索引建立的是否合理；尽量使用简单的表联接；水平分割大表格等 ...
分类：
其他好文 时间：
2016-05-17 08:32:36
阅读次数：
219
