[TOC] HBase集群建立在Hadoop集群基础之上，而且依赖于ZooKeeper，所以在搭建HBase集群之前需要把Hadoop集群搭建起来，并且搭建好ZooKeeper集群。Hadoop与ZooKeeper集群的搭建在前面章节已讲解过，在此不再赘述。 9.1 集群环境搭建 HBase集群搭建 ...
分类：
其他好文 时间：
2018-07-11 12:39:22
阅读次数：
192
起初搭建Hadoop集群时确实相当麻烦，针对Hadoop生态中各个组件还需要考虑版本的兼容，调整诸多配置项，稍不留神就要折腾半天；有痛点就有相应的技术方案， Ambari的诞生方便了我们对整个Hadoop集群的创建、管理、监视。 Centos7制作Ambari本地源并安装 ...
分类：
其他好文 时间：
2018-07-10 11:28:00
阅读次数：
165
一、集群的规划 Zookeeper集群： Hadoop集群： 二、准备工作 1、安装JDK：每台机器都需要安装 我这里使用的是jdk-8u152-linux-x64.tar.gz安装包 2、配置环境变量: 3、配置IP地址与主机名的映射关系 原因：方便SSH调用 方便Ping通 输入: 4、配置免密 ...
分类：
其他好文 时间：
2018-07-05 14:58:51
阅读次数：
219
一、集群简介 HADOOP 集群具体来说包含两个集群：HDFS 集群和 YARN 集群，两者逻辑上分离，但物理上常在一起。 HDFS 集群负责海量数据的存储，集群中的角色主要有： NameNode、DataNode、SecondaryNameNode YARN 集群负责海量数据运算时的资源调度，集群 ...
分类：
其他好文 时间：
2018-07-04 22:52:26
阅读次数：
259
使用Ambari搭建Hadoop集群参考http://blog.51cto.com/tryingstuff/2066561 https://blog.csdn.net/youzhouliu/article/details/66973596?locationNum=15&fps=1
分类：
其他好文 时间：
2018-07-04 11:33:53
阅读次数：
149
一 MapReduce入门 1.1 MapReduce定义 Mapreduce是一个分布式运算程序的编程框架，是用户开发“基于hadoop的数据分析应用”的核心框架； Mapreduce核心功能是将用户编写的业务逻辑代码和自带默认组件整合成一个完整的分布式运算程序，并发运行在一个hadoop集群上。 ...
分类：
其他好文 时间：
2018-07-03 00:58:19
阅读次数：
273
Linux上安装Hadoop集群(CentOS7+hadoop-2.8.0) https://blog.csdn.net/pucao_cug/article/details/71698903 Centos7完全分布式搭建Hadoop2.7.3 https://www.cnblogs.com/ksWo ...
分类：
系统相关 时间：
2018-06-30 10:58:51
阅读次数：
186
原因是hadoop集群没有启动（注意端口号9000） ...
分类：
Web程序 时间：
2018-06-27 14:04:06
阅读次数：
955
一、简介
当今只要谈到大数据，自然想到Hadoop，以前Hadoop还只是个软件、系统，而如今更多代表的是一个大数据生态圈。
本文谈的 Hadoop 特指一个软件，它是 Apache 基金会的顶级项目之一，它本身主要解决了大数据领域的两大核心问题，如何存储(hdfs)、如何计算(mapreduce)。
官方文档：http://hadoop.apach
分类：
其他好文 时间：
2018-06-22 16:29:58
阅读次数：
163
环境下载 首先将下载的 sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz放到 /usr/hadoop/目录下（该目录可以自定义，一般为Hadoop集群安装目录），然后对安装包解压、修改文件名和修改用户权限。 环境配置 1.配置hadoop版本号 切换到/sqoop ...
分类：
其他好文 时间：
2018-06-21 13:48:48
阅读次数：
169
