2.1下载地址1、ApacheHadoop(100%永久开源)下载地址:-http://hadoop.apache.org/releases.html-SVN:http://svn.apache.org/repos/asf/hadoop/common/branches/2、CDH(ClouderaDistributedHadoop,100%永久开源)下载地址:-http://archive.cloudera.com/cdh4/cdh/4/(是ta..
分类:
其他好文 时间:
2015-04-07 19:58:25
阅读次数:
363
大数据我们都知道hadoop,可是还会各种各样的技术进入我们的视野:Spark,Storm,impala,让我们都反映不过来。为了能够更好 的架构大数据项目,这里整理一下,供技术人员,项目经理,架构师选择合适的技术,了解大数据各种技术之间的关系,选择合适的语言。我们可以带着下面问题来阅读本文章:.....
分类:
其他好文 时间:
2015-04-02 22:20:20
阅读次数:
201
1.使用oracle sql developer 4.0.3作为hive query的IDE。 下载hive-jdbc driver http://www.cloudera.com/content/cloudera/en/downloads/connectors/hive/jdbc/hive-jdb...
分类:
其他好文 时间:
2015-03-31 07:52:49
阅读次数:
331
宿主机硬件配置
运行环境软硬件环境l 主机操作系统:Windows 64 bit,双核4线程,主频2.2G,8G内存
l 虚拟软件:VMware®Workstation 9.0.0 build-812388
l 虚拟机操作系统:CentOs 64bit,单核,2G内存
虚拟机软硬件配置
集群网络环境集群包含三个节点:节点之间局域网连接,可以相互ping通。节点IP地址和主机名分...
分类:
其他好文 时间:
2015-03-30 23:11:34
阅读次数:
272
由于Hadoop版本混乱多变,因此,Hadoop的版本选择问题一直令很多初级用户苦恼。本文总结了Apache Hadoop和Cloudera Hadoop的版本衍化过程,并给出了选择Hadoop版本的一些建议。1.Apache Hadoop1.1Apache版本衍化截至目前(2012年12月23日)...
分类:
其他好文 时间:
2015-03-18 15:26:47
阅读次数:
187
1. Impala架构 ?????? Impala是Cloudera在受到Google的Dremel启发下开发的实时交互SQL大数据查询工具,Impala没有再使用缓慢的Hive+MapReduce批处理,而是通过使用与商用并行关系数据库中类似的分布式查询引...
分类:
其他好文 时间:
2015-03-18 12:34:49
阅读次数:
214
深入浅出Hive企业级架构优化、Hive Sql优化、压缩和分布式缓存(企业Hadoop应用核心产品)课程讲师:Cloudy课程分类:Hadoop适合人群:初级课时数量:10课时用到技术:Hive涉及项目:Hive企业级优化咨询qq:1840215592一、课程环境:Cloudera Hadoop ...
分类:
其他好文 时间:
2015-03-13 12:37:36
阅读次数:
239
为什么重启:突然发现ClouderaManager的webui访问不了了……我使用netstat看了一下我的webui监听端口,发现尼玛N多CLOSE_WAIT,网上查了一下是Socket关闭有问题导致N多挂起链接。原因并如何解决:找了半天,没有找到很好的办法,只得用重启CDM来解决的。 如果大家有...
分类:
其他好文 时间:
2015-03-09 15:49:07
阅读次数:
150
参考URL:http://blog.csdn.net/yangzhaohui168/article/details/30118175http://blog.csdn.net/yangzhaohui168/article/details/33403555
分类:
其他好文 时间:
2015-02-12 12:06:11
阅读次数:
140
Cloudera Impala需求为了达到预期的效果,Impala依赖于软件、硬件的可用性,以及下面章节描述的配置。继续阅读:支持的操作系统支持的Hadoop发布Hive Metastore及相关配置Java依赖关系包和库网络配置需求硬件需求用户帐户需求支持的操作系统支持的64位操作系统:Red H...
分类:
其他好文 时间:
2015-02-10 15:03:19
阅读次数:
319