前面介绍过hadoop的简单安装和FA安装,在这里将介绍几种hadoop2中HA(高可用性)安装,HA技术使hadoop不再存在单点namenode的故障。先来第一种:nfs+zookeeperHadoop
版本:2.2.0OS 版本: Centos6.4Jdk 版本: jdk1.6.0_32环境配...
分类:
其他好文 时间:
2014-05-17 03:07:21
阅读次数:
388
1.
CentOS操作安装好了以后,系统自带了openJDK,先查看相关的安装信息:[plain]view plaincopy$rpm -qa | grep
javatzdata-java-2013b-1.el6.noarchjava-1.6.0-openjdk-1.6.0.0-1.61.1.11....
分类:
其他好文 时间:
2014-05-17 00:06:29
阅读次数:
435
目前hadoop1的稳定版本是1.2.1,我们以版本1.2.1为例详细的介绍hadoop1的安装,此过程包括OS安装与配置,JDK的安装,用户和组的配置,这些过程在hadoop2也有可能用到。Hadoop
版本:1.2.1OS 版本: Centos6.4Jdk 版本: jdk1.6.0_32环境配置...
分类:
其他好文 时间:
2014-05-16 22:21:50
阅读次数:
435
最近遇到配置centos
6.2的sshd及sftp日志,发现/etc/syslog.conf文件不存在,然后:#rpm -qa | grep
syslog出来的是rsyslog-5.8.10-6.el6.x86_64然后:#cat
/etc/rsyslog.conf出来的内容几乎和以前的/etc/...
分类:
Web程序 时间:
2014-05-16 06:38:06
阅读次数:
309
先说一下我的环境:windows7-x64位机器下安装的vmware虚拟机,里面安装的是centos6.5-x64位的系统。系统崩溃的原因:从cenos拖拽一个文件到win7下,结果就卡死了。整个系统都动不了,重启虚拟机后出现整个问题:RAMDISK:
incomplete writewrite e...
分类:
其他好文 时间:
2014-05-16 05:14:51
阅读次数:
572
1.检测是否安装了FTP rpm -qvsftpd2.安装ftp yum
installvsftpd3.完成ftp安装后,将/etc/vsftpd/user_list 和
/etc/vsftpd/ftpusers文件中的root这一行注释掉 #root4.编辑 /etc/vsftpd/vsft...
分类:
其他好文 时间:
2014-05-13 22:39:58
阅读次数:
294
目前Hadoop的稳定版本为1.2.1,我们的实验就在hadoop-1.2.1上进行Hadoop 版本:1.2.1OS 版本:
Centos6.4环境配置机器名Ip地址功能用户Hadoop1192.168.124.135namenode,
datanode,secondNameNodejobtrac...
分类:
其他好文 时间:
2014-05-13 19:29:35
阅读次数:
3175
尽管前面尝试了hadoop的simple认证方式,这种方法不是特别安全,在介绍一下hadoop的kerberos方式之前,下面我们尝试一下kerberos。首先介绍一下Kerboros安装OS
版本: Centos6.4Kerberos版本: krb5-1.10.3环境配置机器名Ip地址功能安装模块...
分类:
其他好文 时间:
2014-05-13 19:23:25
阅读次数:
1311
---恢复内容开始---前面花了很多时间来介绍hadoop1的安装,随着hadoop的发展,hadoop2的应用也越来越普及,hadoop2解决了hadoop1中的很多问题,比如单点故障,namenode容量小的问题。我们先来安装最简单的版本Hadoop
版本:2.2.0OS 版本: Centos6...
分类:
其他好文 时间:
2014-05-13 16:45:30
阅读次数:
333
在线gen更新各种依赖包yum-yinstallmakeglibclibaiocompat-libstdc++-33compat-gcc-34compat-gcc-34-c++gcclibXpopenmotifcompat-db1.配置/etc/sysctl.conf
/sbin/sysctl-p
kernel.shmall=2097152
kernel.shmmax=2147483648
kernel.shmmni=4096
kernel.sem=25032000100128
fs.f..
分类:
数据库 时间:
2014-05-13 12:34:13
阅读次数:
404