虽然服务器程序种类繁多，但其基本框架都一样，不同之处在于逻辑处理 模块 功能 I/O 处理单元 处理客户连接，读写网络数据 逻辑单元 业务进程或线程 网络存储单元 数据库、文件或缓存 请求队列 各单元之间的通信方式 IO处理单元：主要是服务器管理客户链接的模块，它通常完成以下工作：等待并接受新的客户 ...
分类：
其他好文 时间：
2021-06-28 19:25:41
阅读次数：
0
设置metastore 机器： ke01、ke02、ke03、ke04 ke03 为元数据库 ke01、ke02、ke04 连接到元数据库 、 hive-metastore搭建 ke03: <configuration> <property> <name>hive.metastore.warehou ...
分类：
数据库 时间：
2021-03-12 13:42:56
阅读次数：
0
1.为什么安装Impala一定要先安装Hive？ Impala是基于Hive的大数据实时分析查询引擎，直接使用Hive的元数据库Metadata,意味着impala元数据都存储在Hive的metastore中。 2.Impala与Hive的关系？ Impala 与Hive都是构建在Hadoop之上的 ...
分类：
其他好文 时间：
2021-01-06 11:58:32
阅读次数：
0
目录 Hive的下载 Hive的安装 1、本人使用MySQL做为Hive的元数据库，所以先安装MySQL。 2、上传Hive安装包 3、解压安装包 4、修改配置文件 5、 一定要记得加入 MySQL 驱动包（mysql-connector-java-5.1.40-bin.jar）该 jar 包放置在 ...
分类：
其他好文 时间：
2020-06-28 09:40:00
阅读次数：
50
hive表中 desc 及 show create table 查出来字段和表的中文comment全是 ？解决方案： 1、进入CDH的元数据库mysql执行：show create database hive; 发现默认是utf8类型 mysql> show create database hive ...
分类：
其他好文 时间：
2020-04-26 20:41:58
阅读次数：
80
元数据库：information——schema其中存储着其他所有数据库的信息 其中的表非常多 schemata：存放所有数据库的名字 tables：用于存放所有数据表的名字 columns：存放所有字段的名字 这些表里面存放的信息非常多，如果用select * from tables; 查询会出现 ...
分类：
数据库 时间：
2020-04-12 08:20:52
阅读次数：
76
airflow安装配置airflow相关软件安装python3.6.5安装安装依赖程序；[root@node01~]#yum-yinstallzlibzlib-develbzip2bzip2-develncursesncurses-develreadlinereadline-developensslopenssl-developenssl-staticxzlzmaxz-develsqlitesql
分类：
其他好文 时间：
2019-12-30 00:31:52
阅读次数：
130
hive中可能会出现一个非常常见的异常：Specified key was too long;max key length is 767 bytes？是mysql/hive字符集问题。需要改变hive元数据库的字符集：mysql>alert database ruozedata character ...
分类：
其他好文 时间：
2019-12-26 19:14:17
阅读次数：
69
Hive内外部区分方法 查看hive元数据：进入mysql中hive元数据库，查看TBLS表，查看对应的表名和表类型； 在hive-cli界面：desc extended tablename，查看TableType，一般在展示结果的最后显示； 在hive-cli界面：desc formatted t ...
分类：
其他好文 时间：
2019-12-14 15:43:27
阅读次数：
85
概述Spark SQL 是 Spark 处理结构化数据的模块; 与基础的 Spark RDD API 不同, Spark SQL 提供的接口提供给 Spark 更多的关于数据和执行计算的结; 内在的, Spark SQL 使用这些额外的信息去执行额外的优化; 这里有几种包括 SQL 和 Datase... ...
分类：
数据库 时间：
2019-10-07 17:41:23
阅读次数：
102
