环境: 主机是Windows XP系统 虚拟机与Ubuntu的版本分别为: VirtualBox-3.2.12-68302-Win ubuntu-10.10-desktop-i386 前提:已安装VirtualBox的增强功能 安装过程可参考以下文章: VirtualBox中的Ubuntu如何实现全 ...
spark由于一些链式的操作,spark 2.1目前只支持hive1.2.1 到http://mirror.bit.edu.cn/apache/hive/hive-1.2.1/ 网址下载hive1.2.1的部署包 2.配置系统环境变量/etc/profile 3. 解压 4.修改配置文件 可不做任何 ...
分类:
其他好文 时间:
2017-03-23 23:53:39
阅读次数:
353
目录: 1.修改主机名和用户名 2.配置静态IP地址 3.配置SSH无密码连接 4.安装JDK1.7 5.配置Hadoop 6.安装Mysql 7.安装Hive 8.安装Hbase 9.安装Sqoop ******************** 1.修改主机名和用户名 修改主机名:Centos中通过v ...
分类:
其他好文 时间:
2017-02-26 19:33:33
阅读次数:
241
我在安装Hive的过程中遇到了好多问题,捣鼓了好久,所以下面的有些操作可能不是必要的操作。
1.配置YARN
YARN 是从 MapReduce 中分离出来的,负责资源管理与任务调度。YARN 运...
分类:
其他好文 时间:
2017-02-23 16:25:34
阅读次数:
222
安装hive 1、下载hive-2.1.1(搭配hadoop版本为2.7.3) 2、解压到文件夹下 /wdcloud/app/hive-2.1.1 3、配置环境变量 4、在mysql上创建元数据库hive_metastore编码选latin,并授权 5、新建hive-site.xml,内容如下: < ...
分类:
其他好文 时间:
2017-01-24 17:58:29
阅读次数:
436
Hive 安装 相比起很多教程先介绍概念,我喜欢先动手装上,然后用例子来介绍概念。我们先来安装一下Hive 先确认是否已经安装了对应的yum源,如果没有照这个教程里面写的安装cdh的yum源http://blog.csdn.net/nsrainbow/article/details/36629339 ...
分类:
其他好文 时间:
2017-01-17 19:47:08
阅读次数:
312
2.安装与配置Nagios监控系统 2.1 创建nagios用户和组 #useradd -s /usr/sbin/nologin nagios #### 指定用户默认shell 没权限登录用户 #mkdir /usr/local/nagios #### nagios主程序安装目录 #chown -R ...
分类:
移动开发 时间:
2016-12-06 04:08:23
阅读次数:
316
Hive与JDBC示例 在使用 JDBC 开发 Hive 程序时, 必须首先开启 Hive 的远程服务接口。在hive安装目录下的bin,使用下面命令进行开启: hive -service hiveserver & //Hive低版本提供的服务是:Hiveserver hive --service ...
分类:
数据库 时间:
2016-12-04 19:32:27
阅读次数:
340
一 新建JAVA项目 并添加 hive-exec-2.1.0.jar 和hadoop-common-2.7.3.jar hive-exec-2.1.0.jar 在HIVE安装目录的lib目录下 hadoop-common-2.7.3.jar在hadoop的安装目录下的\share\hadoop\co ...
分类:
其他好文 时间:
2016-11-23 19:23:02
阅读次数:
319
回顾: hive 安装部署 hive 架构 hive 创建表几种方式,分别是什么 表的类型 分析函数和窗口函数(重点) 数据导入Hive(重点) Hive数据导出(重点) hive的export与import(相关地址只能是hdfsPath) hive中的HQL hive中mapreduce相关操作 ...
分类:
其他好文 时间:
2016-11-10 18:52:56
阅读次数:
256