# ClouderaManager以及CM5.1.0半离线集群部署安装
目前 CM5.1.0 ，CDH5.1.0 是最新版本
# 学习前言
# CM安装前的准备
# 基本环境的配置
# ssh免密码登录
前面已经介绍，这里不再介绍了
# 关闭防火墙
[root@a234-198 cm5.1.0]# service iptables stop
# 修改hosts文件（也是必须的）
必须严格按照以下这种格式 ip aaa.bbb.ccc aaa
例如：116.255.234.198a234-...
分类：
其他好文 时间：
2014-07-24 17:38:46
阅读次数：
419
Hadoop MapReduce思维模式转变的催化剂是大量新技术的诞生，它们能够处理大数据分析所带来的3个V的挑战。扎根于开源社区，Hadoop已经是目前大数据平台中应用率最高的技术，特别是针对诸如文本、社交媒体订阅以及视频等非结构化数据。除分布式文件系统之外，伴随Hadoop一同出现的还有进行大数...
分类：
其他好文 时间：
2014-07-24 17:00:47
阅读次数：
263
大数据(big data)，或称巨量资料，指的是所涉及的资料量规模巨大到无法通过目前主流软件工具，在合理时间内达到撷取、管理、处理、并整理成为帮助企业经营决策更积极目的的资讯。(在维克托·迈尔-舍恩伯格及肯尼斯·库克耶编写的《大数据时代》中大数据指不用随机分析法（抽样调查）这样的捷径，而采用所有数....
分类：
其他好文 时间：
2014-07-24 16:58:45
阅读次数：
239
结构 大数据就是互联网发展到现今阶段的一种表象或特征而已，没有必要神话它或对它保持敬畏之心，在以云计算为代表的技术创新大幕的衬托下，这些原本很难收集和使用的数据开始容易被利用起来了，通过各行各业的不断创新，大数据会逐步为人类创造更多的价值。 其次，想要系统的认知大数据，必须要全面而细致的分解它，我着...
分类：
其他好文 时间：
2014-07-24 16:54:35
阅读次数：
306
万里鹏程，青云独步——记惠普Helion的前世今生今天是一个伟大的时代。大数据，云计算。云是一种革命性的计算模式，它把用户手边的计算设备与超大规模数据中心的处理和存储能力相连接，把计算从首先的资源转变为几乎无线的平台，把用户与他们需要的信息链接起来而不管他们在什..
分类：
其他好文 时间：
2014-07-24 12:29:56
阅读次数：
213
在大数据分析为背景的p2p网贷公司迅速崛起2014年二季度，全国P2P网贷成交额554.75元，较一季度增加145.04亿元，增长35.40%。与此同时，伴随着网贷行业的兴起，网贷公司运作上的坏账也一路飙升。银监会针对网贷公司风险提出监管，试图围剿。网贷公司提高自身风控能力已经迫在眉..
分类：
其他好文 时间：
2014-07-24 12:29:16
阅读次数：
235
《大 数据技术丛书：Hadoop应用开发技术详解》共12章。第1～2章详细地介绍了Hadoop的生态系统、关键技术以及安装和配置；第3章是 MapReduce的使用入门，让读者了解整个开发过程；第4～5章详细讲解了分布式文件系统HDFS和Hadoop的文件I/O；第6章分析了 MapReduce的工...
分类：
其他好文 时间：
2014-07-24 11:25:42
阅读次数：
337
XenServer是在云计算环境中经过验证的企业级虚拟化平台，可提供创建和管理虚拟基础架构所需的所有功能。它深得很多要求苛刻的企业信赖，被用于运行最关键的应用，而且被最大规模的云计算环境和xSP所采用。XenServer：通过整合服务器，降低电源、冷却和数据中心空间需求来降低成..
分类：
其他好文 时间：
2014-07-24 10:52:05
阅读次数：
417
最近在写一些hadoop的运维工具，考虑到hadoop本身是java编写的，api比较方便，可以直接拿来就用准备用java来写。今天测试了几个fs相关的类。主要有FileStatus,FileSystem,DistributedFileSystem,DatanodeInfo,BlockLocationFileStatus是和文件的属性相关的类，比如文件的名称，..
分类：
编程语言 时间：
2014-07-24 10:49:36
阅读次数：
303
谁在用 Hadoop这是个问题。在大数据背景下，Apache Hadoop已经逐渐成为一种标签性，业界对于这一开源分布式技术的了解也在不断加深。但谁才是 Hadoop的最大用户呢？首先想到的当然是它的“发源地”,像Google这样的大型互联网搜索引擎，以及Yahoo专门的广告分析系统。也许你会认为，...
分类：
其他好文 时间：
2014-07-24 10:10:43
阅读次数：
206
