聚合函数 函数返回值型 函数（参数） 描述 BIGINT count(*), count(expr), count(DISTINCT expr[, expr...]) 1.统计总行数，包括含有 NULL 值的行 2.count(expr) 统计提 供非 NULL 的 expr 表达式 值的行数 3. ...
分类：
其他好文 时间：
2021-02-10 13:04:58
阅读次数：
0
在围绕Hadoop形成的大数据技术生态当中，MapReduce的地位，在早期是处于核心地位的，但是伴随着数据处理实时性需求的不断提升，更多新的计算框架出现，MapReduce的地位受到压制，但是作为Hadoop原始计算框架，还是需要相应程度的了解和掌握的。今天的大数据入门分享，我们来具体讲一讲Map ...
分类：
其他好文 时间：
2021-02-09 12:33:28
阅读次数：
0
数据反射的目的是进行数据的加速处理，dremio 包含了raw 模式、聚合处理，以及外部模式创建反射比较简单，可以给予rest api 的sql以及可视化UI 操作，同时官方也提供了一个比较好的实践文档 参考操作 查看查询效果 说明 以下参考资料值得看看，尤其是官方关于最佳实践的电子书 参考资料 h ...
分类：
其他好文 时间：
2021-02-09 12:28:17
阅读次数：
0
写在前面 在我们日常操作数据库的时候，比如订单表、访问记录表、商品表的时候。 经常会处理计算数据列总和、数据行数等统计问题。 随着业务发展，这些表会越来越大，如果处理不当，查询统计的速度也会越来越慢，直到业务无法再容忍。 所以，我们需要先了解、思考这些场景知识点，在设计之初，便预留一些优化空间支撑业 ...
分类：
数据库 时间：
2021-02-06 11:50:24
阅读次数：
0
备注：此处的hadoop版本是3.1.4 一、配置集群 1.1、配置yarn-site.xml <!-- Reducer获取数据的方式 --> <property> <name>yarn.nodemanager.aux-services</name> <value>mapreduce_shuffle ...
分类：
其他好文 时间：
2021-02-02 10:48:15
阅读次数：
0
SQL Query aggregate may not appear in WHERE clause 错误的写法 SELECT StartDate, ClientID, COUNT(1) AS Total FROM dbo.tbm_cti_CustomTableItem_BudgetPeriod W ...
分类：
移动开发 时间：
2021-01-28 12:25:03
阅读次数：
0
maven-assembly-plugin有什么好处呢？ 英文原文：The Assembly Plugin for Maven is primarily intended to allow users to aggregate the project output along with its de ...
分类：
编程语言 时间：
2021-01-27 13:58:43
阅读次数：
0
来源：https://mp.weixin.qq.com/s/Tb8GtabOVBvx88de0C4ncw 0 背景 在某些场景中，比如GROUP BY聚合之后的结果，需要去更新之前的结果值。这个时候，需要将 Kafka 消息记录的 key 当成主键处理，用来确定一条数据是应该作为插入、删除还是更新记 ...
分类：
数据库 时间：
2021-01-27 13:12:51
阅读次数：
0
<！-- demodemo.xml --><dependency> <groupId>org.apache.hadoop</groupId> <artifactId>hadoop-mapreduce-client-core</artifactId> <version>2.7.0</version> ...
分类：
其他好文 时间：
2021-01-26 12:23:58
阅读次数：
0
1 RDD基础知识 1.1 Spark的RDD五大特性 1.1.1 A list of partitions RDD是一个由多个partition（某个节点里的某一片连续的数据）组成的的List；将数据加载为RDD时，一般一个hdfs里的block会加载为一个partition。 对于RDD来说，每 ...
分类：
其他好文 时间：
2021-01-25 11:30:09
阅读次数：
0
