数据库表的增删改查操作： 增、删、改 查： 单表查询 简单查询、where约束、group by分组、聚合查询、having过滤、order by排序、limit限制、正则匹配 多表查询 连表查询：交叉查询、>內连查询、左外连接查询、右外连接查询、全外链接查询、连接结果筛选查询 子查询 ：带关键字i ...
分类：
数据库 时间：
2019-08-26 21:27:40
阅读次数：
170
pandas模块 pandas官方文档：https://pandas.pydata.org/pandas docs/stable/?v=20190307135750 pandas基于Numpy，可以看成是处理文本或者表格数据。pandas中有两个主要的数据结构，其中Series数据结构类似于Nump ...
分类：
其他好文 时间：
2019-08-24 11:26:35
阅读次数：
92
表查询 前期准备一张表 1. 语法执行顺序 2.where约束条件(筛选条件) 3.group by 分组 聚合函数 练习题 4.having 用在group by 之后的筛选 5.distinct 去重 6.order by 排序 7.limit 限制展示数量 8.正则 ...
分类：
数据库 时间：
2019-08-21 23:09:51
阅读次数：
123
pandas模块 五大功能 支持文件存取操作，支持数据库 支持增删改查，切片，高阶函数，分组聚合等单标操作，和dict，list的互相转换 支持多表拼接合并操作 支持简单的绘图操作 支持简单的统计分析操作 友情链接https://www.cnblogs.com/nickchen121/p/10807 ...
分类：
其他好文 时间：
2019-06-20 20:05:56
阅读次数：
160
跨库数据表的运算，一直都是一个说难不算太难，说简单却又不是很简单的、总之是一个麻烦的事。大量的、散布在不同数据库中的数据表们，明明感觉要把它们合并起来，再来个小小的计算，似乎也就那么回事……但真要做起来，需要这又忘了那的，却又不像仅仅就那么回事？ 想要给这些小麻烦们，来一个快刀斩乱麻式的、嘁嚓咔嚓地 ...
分类：
数据库 时间：
2019-06-04 09:21:46
阅读次数：
110
学些MapRedcue主要是学习它的编程思想，在MR的编程模型中，主要思想是把对数据的运算流程分成map和reduce两个阶段： Map阶段：读取原始数据，形成key-value数据（map方法） Reduce阶段：把map阶段的key-value数据按照相同的key进行分组聚合（reduce方法） ...
分类：
其他好文 时间：
2019-05-19 11:43:12
阅读次数：
126
【使用场景】 对RDD执行reduceByKey等聚合类shuffle算子或者在Spark SQL中使用group by语句进行分组聚合时，经过sample或日志、界面定位，发生了数据倾斜。 【解决方案】 局部聚合+全局聚合，进行两阶段聚合。具体为： 将原本相同的key通过附加随机前缀的方式，变成多 ...
分类：
其他好文 时间：
2019-03-23 00:18:20
阅读次数：
180
SQL语句基本语法 表的创建、修改、删除： 表中数据的增加、修改、删除、查看： SQL的 语法、数据类型、约束、删除表中数据(2种方法)、语句查询的执行顺序： 查询 单列、多列、全部 子查询 单行子查询 去重 别名的使用 运算符的使用 order by 排序 group by 分组 having 分 ...
分类：
数据库 时间：
2019-03-20 10:27:23
阅读次数：
183
Django 查询（分组、聚合） 一、聚合查询 单独聚合查询：aggregate( args, kwargs) aggregate( args, kwargs) ? aggregate()是QuerySet 的一个终止子句，意思是说，它返回一个包含一些键值对的字典。键的名称是聚合值的标识符，值是计算 ...
分类：
其他好文 时间：
2019-03-07 20:55:45
阅读次数：
210
聚合实际上对数据做分组统计，SQL Server使用两种操作符来实现聚合，流聚合（Stream Aggregation）和哈希聚合（Hash aggration）。流聚合是非阻塞性的，具有流的特性，流聚合操作符；边处理数据，边输出聚合的结果。而哈希聚合是阻塞性的，只要处理完所有的数据，才会输出聚合的 ...
分类：
其他好文 时间：
2019-01-15 10:38:51
阅读次数：
183
