本Hadoop与HBase集群有1台NameNode, 7台DataNode
1. /etc/hostname文件
NameNode:
node1
DataNode 1:
node2
DataNode 2:
node3
.......
DataNode 7:
node8
2. /etc/hosts文件
N...
分类：
其他好文 时间：
2014-05-10 04:55:08
阅读次数：
386
1. Hadoop中遇到的问题
以前所遇到的问题由于没有记录,所以忘了
(1)NameNode没有启动成功, 是由于你对HDFS多次格式化,导致datanode中与namenode中的VERSION文件中的namespaceID不一致(对于NameNode节点,该文件位于hdfs-site配置文件中dfs.name.dir参数所指定的路径下的current文件夹中, 对于DataNode节点...
分类：
其他好文 时间：
2014-05-10 04:28:25
阅读次数：
475
搭建hadoop集群的时候一定会用到的就是SSH免密码登录[hadoop@hadoop1 ~]$
ssh-keygen -t rsaGenerating public/private rsa key pair.Enter file in which to
save the key (/home/ha...
分类：
系统相关 时间：
2014-05-09 23:10:11
阅读次数：
471
一、自述Nginx模块功能也是相当的丰富，但对于ApacheWeb来说，两者之间还是有区别的，大家都知道Nginx模块是直接被编译进了nginx.conf配置文件，而Apache则是被编译成为.SO文件，有些是需要在httpd.conf配置文件中指定是否加载，这样才能激活模块功能。Nginx模块有三个角色，Ha..
分类：
其他好文 时间：
2014-05-09 21:31:42
阅读次数：
413
只要在BeginInvoke方法的调用语句前再加一句：IntPtr i =
this.Handle;就OK了，这比死循环配合this.IsHandleCreated的判断方法更简洁，因为this.Handle这个属性本身就对应一个方法，取不到句柄，程序就不会向下进行。
分类：
其他好文 时间：
2014-05-09 15:59:16
阅读次数：
209
0、oozie只需安装在一台服务器上，这里选择在namenode上来安装；安装用户为cloud-user1、安装Oozie包：
sudo yum install -y oozie
oozie-client2、对于yarn来说，需要修改/etc/oozie/conf/oozie-env.sh中： CA...
分类：
其他好文 时间：
2014-05-09 15:42:15
阅读次数：
580
1、前提条件：
只需要选择一台服务器即可，这里选择安装在namenode上；安装用户为cloud-user2、安装包： sudo yum install -y hive
hive-metastore hive-server23、安装mysql： sudo yum install -y mysq...
分类：
其他好文 时间：
2014-05-09 15:38:16
阅读次数：
512
一、HeartbeatHeartbeat项目是Linux-HA工程的一个组成部分，它实现了一个高可用集群系统。心跳服务和集群通信是高可用集群的两个关键组件，在Heartbeat项目里，由heartbeat模块实现了这两个功能。heartbeat（Linux-HA）的工作原理：heartbeat最核心的包括两个部分，心跳监测部..
分类：
其他好文 时间：
2014-05-09 06:46:30
阅读次数：
338
1、架构准备： namenode 10.0.0.2 secondnamenode 10.0.0.3
datanode1 10.0.0.4 datanode2 10.0.0.6 datanode3
10.0.0.112、安装用户：cloud-user3、[namenode]namenod...
分类：
其他好文 时间：
2014-05-08 23:27:27
阅读次数：
693
摘要：介绍Hadoop生态系统，从Hadoop生态系统有什么成员，成员能做什么和Hadoop生态系统能够提供大数据问题解决方案两方面来认识。关键词：Hadoop
HDFS MapReduce HBase Hive PigHadoop生态图，通俗地说，就是Hadoop核心模块和衍生的子项目。一幅Ha....
分类：
其他好文 时间：
2014-05-08 23:16:24
阅读次数：
387
