安装 Zookeeper libZookeeper php扩展Zookeeper 启动 单机启动 新建事务日志与快照目录 编辑配置文件 启动 伪分布方式启动 准备： 启动 集群方式启动 每台机器按照下面执行操作 唯一不同的是/usr/local/zookeeper/data/myid里面的值要与配置 ...
分类：
其他好文 时间：
2018-02-08 20:19:18
阅读次数：
232
友情提示：本文超级长，请备好瓜子 Hadoop的运行模式 单机模式是Hadoop的默认模式，在该模式下无需任何守护进程，所有程序都在单个JVM上运行，该模式主要用于开发和调试mapreduce的应用逻辑； 伪分布式模式下，Hadoop守护进程运行在一台机器上，模拟一个小规模的集群。该模式在单机模式的 ...
分类：
其他好文 时间：
2018-01-30 17:08:19
阅读次数：
194
友情提示：本文超级长，请备好瓜子Hadoop的运行模式单机模式是Hadoop的默认模式，在该模式下无需任何守护进程，所有程序都在单个JVM上运行，该模式主要用于开发和调试mapreduce的应用逻辑；伪分布式模式下，Hadoop守护进程运行在一台机器上，模拟一个小规模的集群。该模式在单机模式的基础上增加了代码调试的功能，允许你检查NameNode，DataNode，Jobtracker，Taskt
分类：
其他好文 时间：
2018-01-30 12:12:41
阅读次数：
178
hbase1.2.4 伪分布式安装 注意：在安装hbase或者hadoop的时候，要注意hadoop和hbase的对应关系。如果版本不对应可能造成系统的不稳定和一些其他的问题。在hbase的lib目录下可以看到hadoop对应jar文件，默认情况下hbase下lib的jar文件对应hadoop的相对 ...
分类：
其他好文 时间：
2018-01-19 21:24:57
阅读次数：
204
1、下载路径为：http://mirrors.cnnic.cn/apache/zookeeper/stable/ 2、安装： 第一步 解压zookeeper压缩包： 进入 zookeeper安装目录 第二步 创建一个data目录： 第三步 修改 conf/zoo.cfg文件： 先将zoo_sampl ...
分类：
其他好文 时间：
2018-01-19 16:46:36
阅读次数：
193
伪分布式就是只有一台机器，既是namenode又是datanode。一台阿里云服务器（centos）即可完成。 Java环境 首先需要安装Java环境，下载jdk的安装包，解压到/usr/java/，然后配置环境变量。 建立信任关系 这个命令的作用是生成公钥和私钥，并且在该用户的根目录下生成.ssh ...
分类：
其他好文 时间：
2018-01-04 00:24:44
阅读次数：
199
1.创建hadoop账户,创建用户的home目录并设置密码。（useradd -m hadoop ） 2.本步骤可以不做（我是为了方便，给hadoop赋予了root权限）（vi /etc/sudoers） 以上的设置使用sudo不用输入密码 (注意：要在root用户下且修改完成要esc :wq保存) ...
分类：
其他好文 时间：
2018-01-02 23:26:36
阅读次数：
190
引言 在之前的大数据学习系列中，搭建了Hadoop+Spark+HBase+Hive 环境以及一些测试。其实要说的话，我开始学习大数据的时候，搭建的就是集群，并不是单机模式和伪分布式。至于为什么先写单机的搭建，是因为作为个人学习的话，单机已足以，好吧，说实话是自己的电脑不行，使用虚拟机实在太卡了。。 ...
分类：
其他好文 时间：
2017-12-30 16:59:43
阅读次数：
219
这篇为大家带来hadoop的伪分布模式： 从最简单的方面来说，伪分布模式就是在本地模式上修改配置文件： core-site.xml;hdfs-site.xml;mapred-site.xml;yarn-site.xml4 备注：本地模式见hadoop的安装与配置——第一章：本地模式 思路： |——— ...
分类：
其他好文 时间：
2017-12-26 16:12:22
阅读次数：
379
一，前提：下载好虚拟机和安装完毕Ubuntu系统。因为我们配置的是hadoop分布式，所以需要两台虚拟机，一台主机（master），一台从机（slave） 选定一台机器作为 Master 在 Master 节点上配置 hadoop 用户、安装 SSH server、安装 Java 环境 在 Mast ...
分类：
其他好文 时间：
2017-12-25 01:01:11
阅读次数：
157
