1. zookeeper配置cp app/ochadoop-och3.0.0-SNAPSHOT/zookeeper-3.4.5-cdh5.0.0-beta-2-och3.0.0-SNAPSHOT/conf/zoo_sample.cfg app/ochadoop-och3.0.0-SNAPSHOT/z...
分类:
其他好文 时间:
2015-10-10 17:23:21
阅读次数:
354
1,环境情况安装的CDH5.4,使用CM来管理各个组件(Yarn、Spark、HDFS、Hive、Oozie……)。2,在shell命令下提交Oozie作业①sudo –u hdfs hadoop fs –mkdir /user/cdhfive 创建一个专门的用户目录,这里为cdhfive②sudo...
分类:
其他好文 时间:
2015-10-10 17:17:45
阅读次数:
2980
安装完hadoop后便可安装oozie运行自己的工作流:1、下载oozie压缩包,oozie-4.0.0-cdh5.0.0.tar.gz,下载地址http://archive.cloudera.com/cdh5/cdh/5/2、下载ext-2.2.zip:http://extjs.com/deplo...
分类:
其他好文 时间:
2015-09-20 14:47:52
阅读次数:
445
其实就是从网络上copy的吧,在这里做一下记录这个是看一下有哪些测试方式:hadoop jar /opt/cloudera/parcels/CDH-5.3.6-1.cdh5.3.6.p0.11/jars/hadoop-mapreduce-client-jobclient-2.5.0-cdh5.3.6...
分类:
其他好文 时间:
2015-09-17 19:08:07
阅读次数:
275
安装准备:1、centos6.5 64位 虚拟机,内存分配4G、硬盘位20G2、cm5.4 cdh5.4 包安装步骤一、centos安装完后,进行系统配置1、关闭防火墙service iptables stop设置防火墙不随开机启动chkconfig iptables off查看iptables 状...
分类:
其他好文 时间:
2015-09-09 01:00:55
阅读次数:
368
使用安装包:scala-2.10.3.tgzspark-0.9.0-incubating-bin-hadoop2.tgzhadoop-2.3.0-cdh5.0.0.tar.gzjdk1.7.0_45下载地址:http://mirror.bit.edu.cn/apache/spark/spark-0.9.0-incubating/spark-0.9.0-incubating-bin-hadoop2.tgzhttp://archive.cloudera.com/cdh5/cdh/5/下载..
分类:
其他好文 时间:
2015-09-08 16:51:20
阅读次数:
250
第一步 拷贝 hive-exec-1.1.0-cdh5.4.3.jar? 1、登录master服务器 2、拷贝该jar到 /home/hadoop/jars目录 第二步 发送 hive-exec-1.1.0-cdh5.4.3.jar 到其他服务器 1、使用hadoop用户 ? ?scp /home/hadoop/ja...
分类:
其他好文 时间:
2015-09-06 18:42:40
阅读次数:
379
1.安装phoenix在界面上设置Phoenix的parcel包:http://52.11.56.155:7180/cmf/settings?groupKey=config.scm.parcel.display_group&groupParent=添加一个Remote Parcel Reposito...
分类:
其他好文 时间:
2015-09-04 19:48:21
阅读次数:
1332
[Author]: kwu --- 基于CDH5.4的Spark1.4.1下SparkR的部署,R与Spark的结合为数据分析提供高效的解决方案,Hadoop的中hdfs为数据分析提供分布式存储。本文介绍集成安装的步骤:...
分类:
其他好文 时间:
2015-08-29 15:29:09
阅读次数:
172
CDH 相关升级解决issues:http://www.cloudera.com/content/cloudera/en/documentation/cdh5/v5-0-0/Impala/Cloudera-Impala-Release-Notes/cirn_known_issues.htmlCDH集...
分类:
其他好文 时间:
2015-08-28 19:35:43
阅读次数:
147