本章主要介绍“分而治之”的编程方式。通常情况下，程序的整体功能并非全部编写在一段脚本中，而是把整体功能划分为多个部分，使用本章介绍的过程实现每个部分的功能，最后将各个过程合并在一起。合理使用过程能让程序更加清晰，更容易测试和调试。本章的内容如下:使用消息广播来协调各个角色间的行为使用广播机制实现过程 ...
分类：
其他好文 时间：
2020-06-27 13:34:19
阅读次数：
159
1. order by，sort by，distribute by，cluster by的区别？ 2. 聚合函数是否可以写在order by后面，为什么？ 需求催生技术进步 一、课前准备 二、课堂主题 三、课堂目标 1. 掌握hive表的数据压缩和文件存储格式 2. 掌握hive的JDBC代码操作 ...
分类：
其他好文 时间：
2020-06-26 18:42:15
阅读次数：
58
一、安装 一、课前准备 1. 安装好hadoop2.X版本的三节点集群，并配置好JAVA_HOME和HADOOP_HOME两个环境变量。 二、课堂主题 讲解hive1.2.2版本的三种常见安装部署模式 三、课堂目标 1. 熟练搭建内嵌式hive环境 2. 熟练搭建本地式hive环境 3. 熟练搭建远 ...
分类：
其他好文 时间：
2020-06-26 01:33:04
阅读次数：
115
Yarn资源调度系统 一、课前准备 1. 三个节点的hadoop集群 二、课堂主题 1. yarn架构、核心组件 2. yarn应用提交过程 3. yarn的调度策略 4. yarn的优化 三、课堂目标 1. 数据yarn资源的任务调度原理 2. 熟练对yarn集群进行维护 3. 了解如何使用YAR ...
分类：
其他好文 时间：
2020-06-25 23:50:34
阅读次数：
115
1.课程概述 2.核心功能 3.核心技术 4.环境配置 ...
分类：
其他好文 时间：
2020-06-25 19:09:43
阅读次数：
108
一、课前准备 1. 3节点hadoop集群 2. 安装IDEA 3. 安装maven并配置环境变量 二、课堂主题 1. 围绕MapReduce分布式计算讲解 三、课堂目标 1. 理解MapReduce编程模型 2. 独立完成一个MapReduce程序并运行成功 3. 了解MapReduce工程流程 ...
分类：
其他好文 时间：
2020-06-24 00:32:41
阅读次数：
54
HDFS分布式文件系统 一、课前准备 1. 安装VMware 15虚拟化软件 2. 安装Centos 7虚拟机3个 3. 安装3节点的hadoop2.X集群 4. 某台虚拟机节点安装IDEA 二、课堂主题 本堂课主要围绕HDFS进行讲解，主要包括三方面 1. 架构原理 2. 核心概念 3. HDFS ...
分类：
其他好文 时间：
2020-06-23 00:55:02
阅读次数：
109
##Markdown第一课 斜体 粗体 粗斜体 下划线 *无序列表1 *无序列表2 1.有序列表1 2.有序列表2 1.列表1 *子表1 *子表2 2.列表2 *子表1 *子表2 1.列表1 >区块1 >区块2 2.列表2 >区块1 >区块2 '''Python print("hello") ''' ...
分类：
其他好文 时间：
2020-06-22 12:55:13
阅读次数：
25
第9章使用ssh服务管理远程主机。配置系统网络信息：1.nmcli添加两个网络模版nmcliconnectionaddcon-namecompanyifnameeno16777736autoconnectnotypeethernetip4192.168.10.100/24gw4192.168.10.1nmcliconnectionaddcon-namehouseifnameeno16777736a
分类：
系统相关 时间：
2020-06-22 09:33:47
阅读次数：
71
1. 概述 ShardingSphere是一套开源的分布式数据库中间件解决方案组成的生态圈，它由Sharding-JDBC、Sharding-Proxy和Sharding-Sidecar（计划中）这3款相互独立的产品组成。他们均提供标准化的数据分片、分布式事务和数据库治理功能，可适用于如Java同构 ...
分类：
数据库 时间：
2020-06-19 21:00:44
阅读次数：
62
