Cloudera Hadoop 4 实战课程(Hadoop 2.0、集群界面化管理、电商在线查询+日志离线分析)适合人群：中级课时数量：42课时用到技术：CDH4，Cloudera Manager，Hive，HBase，Sqoop涉及项目：电商业日志流量分析项目咨询qq：1840215592Clou...
分类：
其他好文 时间：
2015-01-13 14:03:03
阅读次数：
151
小编写在前面的话“天下武功，唯快不破”，但是如果不清楚原理，快也是徒劳。在这物欲横行，数据爆炸的年代，BigData时代到了，如果熟悉了整个hadoop的搭建过程，我们是否也能从中攫取一桶金？！前期准备l 两台linux虚拟机（本文使用redhat5，IP分别为 192.168.1.210、192....
分类：
系统相关 时间：
2015-01-12 11:31:31
阅读次数：
296
环境：Win7系统装虚拟机虚拟机VMware-workstation-full-9.0.0-812388.exeLinux系统Ubuntu12.0.4JDK jdk-7u17-linux-i586.tar.gz搭建步骤：首先在win系统装虚拟机，执行VMware-workstation-full-9...
分类：
其他好文 时间：
2015-01-11 17:38:48
阅读次数：
211
1. hadoop集群：1.1 系统及硬件配置： hadoop版本：2.6 ；三台虚拟机：node101(192.168.0.101)、node102(192.168.0.102)、node103(192.168.0.103)； 每台机器2G内存、1个CPU核； node101: NodeManager、 NameNode、ResourceManager、DataNode； ...
分类：
编程语言 时间：
2015-01-11 06:15:09
阅读次数：
307
# (WJW)高可用,完全分布式Hadoop集群HDFS和MapReduce安装配置指南 > 为了部署HA集群,应该准备以下事情: * namenode服务器: 运行namenode的服务器应该有相同的硬件配置. * journalnode服务器:运行的journalnode进程...
分类：
其他好文 时间：
2015-01-08 13:33:04
阅读次数：
166
今天在使用Hive查询某分析数据最大值的时候，出现了一定的问题，hive中现象如下：
Caused by: java.io.FileNotFoundException://http://slave1:50060/tasklog?attemptid=attempt_201501050454_0006_m_00001_1
然后查看一下jobtracker的日志：
20...
分类：
其他好文 时间：
2015-01-06 15:41:24
阅读次数：
212
以horntonworks给出推荐配置为蓝本，给出一种常见的Hadoop集群上各组件的内存分配方案。方案最右侧一栏是一个8G VM的分配方案，方案预留1-2G的内存给操作系统，分配4G给Yarn/MapReduce，当然也包括了HIVE，剩余的2-3G是在需要使用HBase时预留给HBase的。Configuration FileConfiguration SettingValue Calcula...
分类：
其他好文 时间：
2015-01-06 08:38:43
阅读次数：
160
一个4节点Hadoop集群的配置示例，其中包括一个name node，一个secondary name node，两个data node。
分类：
其他好文 时间：
2014-12-30 14:53:46
阅读次数：
174
