安装前准备 主机和系统 Host OS Memory IP bigdata001-dev Cent OS 7.4 x64 32G 192.168.1.1 bigdata002-dev Cent OS 7.4 x64 32G 192.168.1.2 bigdata003-dev Cent OS 7.4 ...
分类：
其他好文 时间：
2019-02-19 13:41:04
阅读次数：
231
大数据平台CDH6.1.0安装配置标签（空格分隔）：大数据平台构建一：关于CDH6.1.0的介绍二：系统环境初始化三：安装CDH6.1.0所需环境四：配置CDH6.1.0的cloudera-manager安装一：关于CDH6.1.0的介绍Cloudera在前天12月19日，对外宣布正式发布ClouderaEnterprise6.1包含大数据生态版本如下:1.组件版本：Kafka2.0,Spark2
分类：
其他好文 时间：
2019-02-16 17:07:41
阅读次数：
2028
about云课程最新课程Cloudera课程 问题导读： 1.hadoop编程需要哪些基础？ 2.hadoop编程需要注意哪些问题？ 3.如何创建mapreduce程序及其包含几部分？ 4.如何远程连接eclipse，可能会遇到什么问题？ 5.如何编译hadoop源码？ 阅读此篇文章，需要些基础下面 ...
分类：
其他好文 时间：
2019-02-14 20:49:09
阅读次数：
217
1. Cloudera Management Service服务全部无法启动 观察到的现象： （1）cm service 组件无法启动，启动时服务请求超时终止；（2）主机信息也无法获取到，一直提示“无法与服务端取得联系”（3）cm-server日志中提示“Authentication failure ...
分类：
其他好文 时间：
2019-01-29 11:54:30
阅读次数：
797
前言：最近有些浮躁，大环境变化无常，这种情况下唯有学习才是王道，好吧，开始学习flume！ 一、Flume简介 Flume 作为 cloudera 开发的实时日志收集系统，受到了业界的认可与广泛应用。 Flume 初始的发行版本目前被统称为 Flume OG（original generation） ...
分类：
Web程序 时间：
2019-01-28 00:46:44
阅读次数：
187
IMPALA部署和架构(一) 一，概要 因公司业务需求，需要一个查询引擎满足快速查询TB级别的数据，所以我们找到了presto和impala，presto在前面讲过今天只说impala，impala是cloudera公司主导开发的新型查询系统，impala没有在使用缓慢的Hive+MapReduce ...
分类：
其他好文 时间：
2019-01-20 17:26:19
阅读次数：
848
1 .背景 flume是由cloudera软件公司产出的可分布式日志收集系统，后与2009年被捐赠了apache软件基金会，为hadoop相关组件之一。尤其近几年随着flume的不断被完善以及升级版本的逐一推出，特别是flume-ng;同时flume内部的各种组件不断丰富，用户在开发的过程中使用的便 ...
分类：
Web程序 时间：
2019-01-14 11:52:46
阅读次数：
210
一、kudu概念 Apache Kudu是由Cloudera开源的存储引擎，可以同时提供低延迟的随机读写和高效的数据分析能力。Kudu支持水平扩展，使用Raft协议进行一致性保证，并且与Cloudera Impala和Apache Spark等当前流行的大数据查询和分析工具结合紧密。 这是一个为块数 ...
分类：
数据库 时间：
2019-01-14 00:19:03
阅读次数：
980
-- kafka路径示例 /opt/cloudera/parcels/KAFKA/bin-- kafka启动./kafka-server-start.sh -daemon ../config/server.properties -- 帮助信息 kafka-topics --help -- 查看top ...
分类：
其他好文 时间：
2019-01-10 12:07:23
阅读次数：
158
hadoop发行版本 1. apache hadoop http://hadoop.apache.org/ 2. cloudera hadoop(CDH) https://www.cloudera.com/ 3. hortonworks hadoop(HDP) https://hortonworks ...
分类：
其他好文 时间：
2019-01-03 15:02:32
阅读次数：
264
