配置环境 Hadoop部署 配置Hadoop-Master、Hadoop-Slave主机间的免key登录： 在各个主机上安装JDK 安装hadoop 测试访问OK 部署Hive 解压部署、配置环境变量: 安装部署mysql环境 修改HIVE配置文件: 初始化Mysql 启动Hive 部署Flume ...
分类：
Web程序 时间：
2017-05-23 18:48:59
阅读次数：
345
【大数据】Splunk企业级运维智能&大数据分析平台新手入门视频课程
讲师：张文星
本课程系Splunk入门系列课程，实战为主，实战中穿插相关概念和理论。课程包括Splunk基础知识、安装部署、...
分类：
其他好文 时间：
2017-03-18 21:34:48
阅读次数：
257
Hadoop部署方式
本地模式
伪分布模式(在一台机器中模拟，让所有进程在一台机器上运行)
集群模式 服务器只是一堆废铁而已，上面跑了tomcat，我们叫它web服务器；上面跑了mysql，我们叫它...
分类：
其他好文 时间：
2017-02-09 16:15:32
阅读次数：
126
【1】搭建HA高可用hadoop-2.3（规划+环境准备）【2】搭建HA高可用hadoop-2.3（安装zookeeper）【3】搭建HA高可用hadoop-2.3（部署配置hadoop--cdh5.1.0）【4】搭建HA高可用hadoop-2.3（部署配置HBase）部署配置habase(1)安装habasemaster1、slave1、slave2、slave3#cd/opt
#tar..
分类：
其他好文 时间：
2016-06-16 18:23:45
阅读次数：
241
一、规划192.168.10.135Master192.168.10.132Slave1192.168.10.133Slave2注:均已关闭SELinux和Firewalld.二、部署前准备a.添加Hadoop用户并设置密码#useraddhadoop
#passwd--stdinhadoopb.添加sudo权限#ls-la/etc/sudoers
#chmodu+w/etc/sudoers##添加写权限
#vi/etc/sudoers
9..
分类：
其他好文 时间：
2016-04-22 16:54:28
阅读次数：
279
一、Hadoop部署模式单机模式：默认情况下运行为一个单独机器上的独立Java进程，主要用于调试环境伪分布模式：在单个机器上模拟成分布式多节点环境，每一个Hadoop守护进程都作为一个独立的Java进程运行完全分布式模式：真实的生产环境，搭建在完全分布式的集群环境二、添加用户..
分类：
其他好文 时间：
2016-04-20 13:45:05
阅读次数：
225
hadoop部署完成后datanode无法启动问题解决1.检查是否有遗留的hadoop进程还在运行，如果有的话，先stop-all.sh或kill杀掉；2.在master节点上，删除/tmp/hadoop-XXX/下的所有文件；3.在slave节点上，删除/tmp/hadoop-XXX/下的所有文件...
分类：
其他好文 时间：
2015-11-27 16:49:04
阅读次数：
122
第一步 jdk的安装 ??????1、将下载好的jdk放在要安装的目录下（我的目录是：/root/hadoop/opt/cloud,使用WinSCP直接拖到目标目录） ? ? ? 2、在目标目录解压 ? sudo?tar?xvf?jdk-7u45-linux-x64.ta...
分类：
其他好文 时间：
2015-11-17 11:11:55
阅读次数：
176
hadoop部署需要ssh免密码登录.
在官方网站上就两句话:
但是在我的机器上出现了很多的问题,导致一直ssh还是需要密码,在这里一一写下:
1.authorized_keys的权限必须是600的.而生成默认的不是
所以使用一下命令:
$ chmod 600 authorized_keys
顺带,还有.ssh这个文件夹的目录的...
分类：
系统相关 时间：
2015-08-31 21:43:46
阅读次数：
243
尽管hadoop和一些培训视频课程上讲分布式部署比较详细，但是在部署时仍遇到了一些小问题，在此mark一下：1.linux的namenode主机上安装了ssh，也启动了ssh，并且执行了: /etc/init.d/iptables status显示： Firewall is stopped.但是，....
分类：
其他好文 时间：
2015-07-25 01:38:56
阅读次数：
136
