hive常用交互命令 “-e” 不进入hive的交互窗口执行sql语句。 eg： bin/hive -e "show tables;" “-f” 执行脚本中sql语句 eg: bin/hive -f "/home/user/hive/tmp/hivef.sql"; "!quit" 退出hive交互窗... ...
分类：
其他好文 时间：
2019-10-22 14:48:14
阅读次数：
157
数据层的存储一般如下： Data Source 数据源一般是业务库和埋点，当然也会有第三方购买数据等多种数据来源方式。业务库的存储一般是Mysql 和 PostgreSql。 ODS 层 ODS 的数据量一般非常大，所以大多数公司会选择存在HDFS上，即Hive或者Hbase，Hive居多。 可将O ...
分类：
其他好文 时间：
2019-10-22 13:07:13
阅读次数：
124
Hive脚本中切勿使用/**/注释 Hive脚本的注释目前好像只有 -- ，我之前在做初版数据的时候 使用NotePad++ 习惯性的有时候注释会写成 /**/ ,然后就引发了问题 脚本上传到hue，加入调度，调度正常执行 不报错，但是应该有的数据却为空！！！ 奇了怪了.... (反复执行了好多遍， ...
分类：
其他好文 时间：
2019-10-20 10:51:35
阅读次数：
148
Hive学习之路 （一）Hive初识 https://www.cnblogs.com/qingyunzong/p/8707885.html 讨论QQ：1586558083 目录 Hive 简介 什么是Hive 为什么使用 Hive Hive 特点 Hive 和 RDBMS 的对比 Hive的架构 1 ...
分类：
其他好文 时间：
2019-10-20 10:46:35
阅读次数：
102
https://www.cnblogs.com/haogj/archive/2011/07/22/2113496.html https://www.cnblogs.com/darrenji/p/3869602.html ...
分类：
其他好文 时间：
2019-10-20 00:59:59
阅读次数：
74
一、最终打包的目录结构 二、项目结构 三、开始 1、最终打包的目录，可根据自己需要修改。 2、配置清理插件，每次打包前，清理之前生成的打包目录。 3、打包自己的项目为jar并放入lib目录，不包含依赖。 4、将项目依赖的jar，复制到lib目录。 5、将项目resources下的文件，复制到conf ...
分类：
编程语言 时间：
2019-10-19 12:56:40
阅读次数：
144
一、hive安装部署 1、hive安装及配置 （1）解压apache-hive-1.2.1-bin.tar.gz到/opt/module/目录下面 （2）修改apache-hive-1.2.1-bin.tar.gz的名称为hive （3）修改/opt/module/hive/conf目录下的hive ...
分类：
其他好文 时间：
2019-10-18 22:08:24
阅读次数：
113
前提：虚拟机可以上网，hadoop集群搭建成功并且启动。注意：每行代码所执行的路径。一、安装MySQL1、在线安装MySQLyuminstallmysql-server安装完成2、启动MySQL服务servicemysqldstart3、设置MySQLroot用户密码（1）、默认没有密码，所以直接进入MySQL按回车即可。（2）、输入命令设置root密码setpasswordforroot@loc
分类：
其他好文 时间：
2019-10-18 15:40:53
阅读次数：
113
如下图所示，从逻辑上来看，Hive包含了3大部分。HiveClientsHiveServicesHiveStorageandComputing用户操作Hive的接口主要有三个：CLI，Client和WUI。其中最常用的是CLI，Cli启动的时候，会同时启动一个Hive副本。Client是Hive的客户端，用户连接至HiveServer。在启动Client模式的时候，需要指出HiveServer所在
分类：
其他好文 时间：
2019-10-18 15:30:57
阅读次数：
91
上一篇博客Chubby的锁服务中已经对Chubby的设计和实现做了比较详细的实现，但由于其闭源身份，工程中接触比较多的还是它的一个非常类似的开源实现Zookeeper。Zookeeper作为后起之秀，应该对Chubby有很多的借鉴，他们有众多的相似之处，比如都可以提供分布式锁的功能；都提供类似于UN... ...
分类：
其他好文 时间：
2019-10-18 09:34:09
阅读次数：
96
