1、Hive是一种建立在Hadoop文件系统上的数据仓库架构,并对存储在HDFS中的数据进行分析和管理;(也就是说对存储在HDFS中的数据进行分析和管理,我们不想使用手工,我们建立一个工具把,那么这个工具就可以是hive) 2、 hive建表语法中的分隔符设定ROW FORMAT DELIMITED ...
分类:
其他好文 时间:
2019-12-04 10:35:57
阅读次数:
88
hive条件函数 (1)if函数:if(条件表达式,结果1,结果2) hive> select if(1=2,100,200) from lxw_dual; 200 hive> select if(1=1,100,200) from lxw_dual; 100 (2)coalesce函数:返回参数中 ...
分类:
其他好文 时间:
2019-12-03 23:48:24
阅读次数:
108
Fedora镜像下载地址 Fedora 7核心源码包在: http://archives.fedoraproject.org/pub/archive/fedora/linux/releases/7/Fedora/source/SRPMS/kernel-2.6.21-1.3194.fc7.src.rp ...
分类:
其他好文 时间:
2019-12-03 19:37:03
阅读次数:
348
为什么要用SQL 1)事实上的标准 MySQL、Oacle、DB2、SQL Server都是用的SQL操作,DBA、运维人员使用SQL门槛比较低 2)易学易用 SQL对于不懂的人学习较容易 3)受众面广 无论做Java、.Net、Php都需要与数据库交互,都需要编写SQL Hive: 类似于SQL的... ...
分类:
数据库 时间:
2019-12-03 18:00:13
阅读次数:
92
Hive之累计报表生成 1.原始数据 u01 2019/1/21 5u02 2019/1/23 6u03 2019/1/22 8u04 2019/1/20 3u01 2019/1/23 6u01 2019/2/21 8u02 2019/1/23 6u01 2019/2/22 4 2.建表映射上述数据 ...
分类:
其他好文 时间:
2019-12-02 23:53:30
阅读次数:
216
安装hive,初始化数据库的时候报错 schematool -dbType mysql -initSchema Metastore Connection Driver : com.mysql.cj.jdbc.Driver Metastore connection User: hive org.apa ...
分类:
数据库 时间:
2019-12-02 22:01:28
阅读次数:
172
问题: 原因: sparksql生成的hive表有空文件,但是sparksql读取空文件的时候,因为表示orc格式的,导致sparksql解析orc文件出错。但是用hive却可以正常读取。 解决办法: 暂时不知道怎么解决,这里先记录一下,等找到方法再回来补充 ...
分类:
数据库 时间:
2019-12-02 16:36:57
阅读次数:
554
Hive安装部署与配置 1.1 Hive安装地址 1)Hive官网地址: http://hive.apache.org/ 2)文档查看地址: https://cwiki.apache.org/confluence/display/Hive/GettingStarted 3)下载地址: http:// ...
分类:
其他好文 时间:
2019-12-02 14:00:32
阅读次数:
123
1. 前置条件: 已经安装好了带有HDFS, MapReduce, Yarn 功能的 Hadoop集群 链接: "ubuntu18.04.2 hadoop3.1.2+zookeeper3.5.5高可用完全分布式集群搭建" 2. 上传tar包并解压到指定目录: 3. 修改hive配置文件: 新建文件夹 ...
分类:
其他好文 时间:
2019-12-02 13:51:54
阅读次数:
127
HBase的部署与其它相关组件(Hive Phoenix)的集成 一、HBase部署 1.1、Zookeeper正常部署 首先保证Zookeeper集群的正常部署,并启动之: /opt/module/zookeeper-3.4.5/bin/zkServer.sh start 1.2、Hadoop正常 ...
分类:
其他好文 时间:
2019-12-02 13:35:42
阅读次数:
136