2.1上传 2.2解压jdk #创建文件夹 mkdir /usr/java #解压 tar -zxvf jdk-7u55-linux-i586.tar.gz -C /usr/java/ 2.3将java添加到环境变量中 vim /etc/profile #在文件最后添加 export JAVA_HO ...
分类:
其他好文 时间:
2016-11-19 03:14:21
阅读次数:
199
zookeeper的配置: zookeeper有三种配置方式:单机式/伪分布式/集群式 其中伪分布式是在一台电脑上通过不同的端口来模拟分布式情形,需要N份配置文件和启动程序,而集群式是多个zookeeper程序。 首先通过sftp等方式获取tar包,解压到指定的目录:/usr/local/java ...
分类:
Web程序 时间:
2016-11-17 18:49:56
阅读次数:
480
1.准备Linux环境 1.0点击VMware快捷方式,右键打开文件所在位置 -> 双击vmnetcfg.exe -> VMnet1 host-only ->修改subnet ip 设置网段:192.168.1.0 子网掩码:255.255.255.0 -> apply -> ok 回到window ...
分类:
其他好文 时间:
2016-10-27 17:04:12
阅读次数:
229
安装真实集群,而不是但节点或者伪分布式,以3个节点为例,node1为NameNode和SecondNameNode,node2和node3为DataNode。 1、3台机器的配置必须要一模一样,只需要在node1上配置好之后,scp到node2和node3上就行了; 2、安装ssh免密码登录,和常规 ...
分类:
其他好文 时间:
2016-10-25 16:32:27
阅读次数:
159
目的: 学习使用hdfs 的java命令操作 环境: hadoop2.6.4 伪分布式 win7 + eclipse Version: Luna Service Release 1 (4.4.1) 1. 新建项目 1.1 新建java项目 Hadoop_伪分布式 1.2 导入hadoop 2.6.4 ...
1. Hadoop 环境搭建 过 1.1 hadoop2.6.4 搭建伪分布式 ok ref 伪分布式 hadoop 2.6.4 后续: 1.2 纯分布式搭建 notok 1.3 发行版CDH、Hortornwork 搭建 notok 2. HDFS 命令行使用 过 1.1 常用功能使用 ok 创建 ...
分类:
其他好文 时间:
2016-10-23 17:01:07
阅读次数:
161
说明: 任务:搭建Hadoop伪分布式版本。 目的:快速搭建一个学习环境,跳过这一环境,快速进入状态,使用Hadoop一些组件做些任务 没有选择2.7,觉得bug比较多,不稳定。 选择伪分布式简单快速 环境: Win 7 64 8G 内存 ,4核 VM 12,1 虚拟机 3G 内存 ubuntu 4 ...
分类:
其他好文 时间:
2016-10-23 14:52:26
阅读次数:
193
Hbase安装模式介绍 单机模式 1> Hbase不使用HDFS,仅使用本地文件系统 2> ZooKeeper与Hbase运行在同一个JVM中 分布式模式– 伪分布式模式1> 所有进程运行在同一个节点上,不同进程运行在不同的JVM当中2> 比较适合实验测试– 完全分布式模式1> 进程运行在多个服务器 ...
分类:
其他好文 时间:
2016-10-09 23:14:35
阅读次数:
251
1.准备环境 虚拟机(redhat enterprise linux 6.5) jdk-8u92-linux-x64.tar.gz hadoop-0.20.2.tar.gz 2.关闭虚拟机的防火墙,selinux,配置SSH免密码登录 [root@sishen ~]# vim /etc/syscon... ...
分类:
其他好文 时间:
2016-10-09 14:17:50
阅读次数:
243
不依赖hadoop 百度分享安装包地址:http://pan.baidu.com/s/1dD4BcGT 点击打开链接 解压 并重命名: 进入spark100目录: 修改配置: Cd conf 配置单击节点,故只需要写本机的hostname就可以了。 重命名Spark-env.sh.template ...
分类:
其他好文 时间:
2016-10-04 16:29:33
阅读次数:
156