一、发行版本 ? Hadoop发行版本分为开源 社区版 和 商业版 ，社区版是指由Apache软件基金会维护的版本，是官方维护的版本体系。商业版Hadoop是指由第三方商业公司在社区版Hadoop基础上进行了一些修改、整合以及各个服务组件兼容性测试而发行的版本，比较著名的有cloudera的CDH、 ...
分类：
其他好文 时间：
2019-04-14 16:33:00
阅读次数：
168
1查询官网地址，提供了详细的各个版本的jar依赖版本信息 https://www.cloudera.com/documentation/enterprise/release-notes/topics/cdh_vd_cdh5_maven_repo_516x.html ...
分类：
其他好文 时间：
2019-04-07 12:51:34
阅读次数：
197
Nginx经常被用于终结SSL连接，可能是因为上游服务器不能够使用SSL。要使用SSL就需要在编译安装时在Nginx的二进制文件中添加--with_http_ssl_module模块，并且要安装ssl证书和秘钥。以下示例代码表示对客户端和反向代理之间的流量进行加密，主要应该在内部网络建设安全性很高的情况下。server{listen443defaultssl;server_namewww.test
分类：
Web程序 时间：
2019-04-01 09:12:55
阅读次数：
186
虚拟机准备 更新虚拟机，能够减少很多问题，以ubuntu为例 创建hadoop用户，并加入管理员组，防止权限问题 登录hadoop用户 安装SSH 安装JDK8 准备软件安装目录，以 为例 下载jdk的压缩包，假设下载的路径是 配置环境变量 配置生效 下载CDH Hadoop 地址：http://a ...
分类：
其他好文 时间：
2019-03-31 15:37:54
阅读次数：
163
cdh搭建之前期优化：具体见链接地址：03搭建cdh生产环境前的Linux优化（涉及到Linux内存参数优化）https://blog.51cto.com/12445535/2365948
分类：
其他好文 时间：
2019-03-28 13:40:17
阅读次数：
151
1. 软件的版本选择 在大数据领域，我们使用的版本一般有2个选择，一个是官方发布的版本，大多数为Apache发布的版本（一般为免费的），另一个是由其他公司对官方版本进行集成的版本（一般是要收费的）；收费版本一般选择CDH的版本，它对软件做了一些兼容性处理。如果使用CDH版本，请保证CDH版本一致，才 ...
分类：
Web程序 时间：
2019-03-28 12:28:39
阅读次数：
207
2019/3/26星期二调整YARN本主题仅适用于YARN群集，并介绍如何为群集调整和优化YARN。注意：下载ClouderaYARN调整电子表格以帮助计算YARN配置。有关简短视频概述，请参阅调整YARN应用程序。概观此概述提供YARN群集的抽象描述和YARN调整的目标。YARN群集由主机组成。主机提供内存和CPU资源。vcore或虚拟核心是主机CPU的使用份额。调整YARN主要包括在工作主机上
分类：
其他好文 时间：
2019-03-26 19:27:55
阅读次数：
645
优化cdh集群性能-可在安装集群前操作002//读完cdh官方文档后，可知的优化操作可在《03搭建cdh生产环境前的Linux优化（涉及到Linux内存参数优化）》https://blog.51cto.com/12445535/2365948这步同时操作讲解了：提供了一些性能问题的解决方案，并介绍了配置最佳实践。1、禁止tuned服务//是内存分配管理//关于tuned服务是什么？RHEL/Cen
分类：
其他好文 时间：
2019-03-26 09:20:33
阅读次数：
256
1）Hive下载：http://archive.cloudera.com/cdh5/cdh/5/ wget http://archive.cloudera.com/cdh5/cdh/5/hive-1.1.0-cdh5.7.0.tar.gz 2）解压 tar -zxvf hive-1.1.0-cdh5 ...
分类：
其他好文 时间：
2019-03-21 01:04:22
阅读次数：
180
1) 下载Hadoop http://archive.cloudera.com/cdh5/cdh/5/ 2.6.0-cdh5.7.0 wget http://archive.cloudera.com/cdh5/cdh/5/hadoop-2.6.0-cdh5.7.0.tar.gz 2）安装jdk 下载 ...
分类：
其他好文 时间：
2019-03-21 00:57:23
阅读次数：
174
