Hadoop的环境搭建分为单机模式、伪分布式模式、完全分布式模式。 因为我的本本比较挫，所以就使用伪分布式模式。 安装JDK 一般Linux自带的Java运行环境都是Open JDK，我们到官网下载Oracle JDK（http://www.oracle.com/technetwork/java/j... ...
分类：
其他好文 时间：
2017-07-10 10:32:37
阅读次数：
227
Hadoop集群环境搭建配置 前言 Hadoop的搭建分为三种形式：单机模式、伪分布模式、完全分布模式，只要掌握了完全分布模式，也就是集群模式的搭建，剩下的两种模式自然而然就会用了，一般前两种模式一般用在开发或测试环境下，Hadoop最大的优势就是分布式集群计算，所以在生产环境下都是搭建的最后一种模 ...
分类：
其他好文 时间：
2017-07-08 20:22:37
阅读次数：
414
环境是 64bit Ubuntu 14.04 系统, jdk 1.7 以及 Eclipse Mars (4.5) 这里介绍两种调试 Hadoop 源代码的方法: 利用 Eclipse 远程调试工具和打印调试日志. 这两种方法均可以调试伪分布式工作模式和完全分布式工作模式下的 Hadoop. (1) ...
分类：
其他好文 时间：
2017-07-04 12:12:12
阅读次数：
198
(一）软件准备 1，hadoop-2.7.3.tar.gz（包） 2,三台机器装有cetos7的机子 （二）安装步骤 1，给每台机子配相同的用户 进入root : su root 创建用户s: useradd s 修改用户密码：passwd s 2.关闭防火墙及修改每台机的hosts(root 下） ...
分类：
其他好文 时间：
2017-06-21 18:55:37
阅读次数：
283
目录 一、Document Store 1.数据模型 1.1 Json 1.2 Google Protocol Buffer 2.MongoDB 2.1 API and Query Model 2.2 Architecture 二、图存储系统 1.图数据模型 2.Neo4j 3.RDF和Sparql ...
分类：
其他好文 时间：
2017-06-02 18:55:24
阅读次数：
266
主要介绍Hadoop家族产品，常用的项目包括Hadoop, Hive, Pig, HBase, Sqoop, Mahout, Zookeeper, Avro, Ambari, Chukwa，新增加的项目包括，YARN, Hcatalog, Oozie, Cassandra, Hama, Whirr, ...
分类：
其他好文 时间：
2017-06-01 11:19:26
阅读次数：
252
hadoop完全分布式的搭建思路？jdk必须安装，所有机器都是一样的。环境变量是PATH,但是在配置PATH的时候，一定要加上.;这是系统原来的环境变量，如果不加这个，可能再次开不出机器。Hadoop安装，可以放在yarn，也可以不放在yarn，环境变量HADOOP_HOME,JAVA_HOME(这个主要是切换j..
分类：
其他好文 时间：
2017-05-18 20:03:38
阅读次数：
132
经过一系列的前期环境准备，现在可以开始Hadoop的安装了，在这里去apache官网下载2.7.3的版本 http://www.apache.org/dyn/closer.cgi/hadoop/common/hadoop-2.7.3/hadoop-2.7.3.tar.gz 不需要下载最新的3.0版本 ...
分类：
其他好文 时间：
2017-05-10 09:44:28
阅读次数：
277
Hadoop2.7.3 多台主机完全分布式搭建（Mac OS X 10.12.4系统） 前言 由于学校课程实验的要求，特意需要搭建hadoop的完全分布式系统，所以自己就蛋疼的配了，可惜关于MAC系统的Hadoop搭建材料太少，而且真正的基于校园网的配置基本上没有(基本是在一台电脑上进行，因此当在多 ...
分类：
系统相关 时间：
2017-04-29 22:19:03
阅读次数：
343
很久没有更新了，主要是没有时间，今天挤出时间验证了一下，果然还是有些问题的，不过已经解决了，就发上来吧。 PS：小豆腐看仔细了哦~ 关于hadoop环境搭建，从单机模式，到伪分布式，再到完全分布式，我们这里就讨论完全分布式，关于搭建工具，有hadoop+CentOs+VMware，感觉各个版本还是有 ...
分类：
系统相关 时间：
2017-04-25 10:01:43
阅读次数：
1018
