## Hive环境搭建1. hive下载:http://archive-primary.cloudera.com/cdh5/cdh/5/hive-1.1.0-cdh5.7.0.tar.gzwget http://archive-primary.cloudera.com/cdh5/cdh/5/hive ...
分类:
数据库 时间:
2018-10-31 11:22:40
阅读次数:
179
一,配置yum源 ls -l /dev |grep cd mkdir /mnt/cdrom mount /dev/cdrom /mnt/cdrom cd /etc/yum.repos.d 将其他yum源备份并删除 vi media.repo yum clean all yum makecache 二 ...
分类:
其他好文 时间:
2018-10-31 11:22:07
阅读次数:
309
第一节:单点登录简介第一步:了解单点登录SSO主要特点是:SSO应用之间使用Web协议(如HTTPS),并且只有一个登录入口.SSO的体系中有下面三种角色:1)User(多个)2)Web应用(多个)3)SSO认证中心(一个)SSO实现包含以下三个原则:1)所有的登录都在SSO认证中心进行。2)SSO认证中心通过一些方法来告诉Web应用当前访问用户究竟是不是通过认证的用户.3)SSO认证中心和所有的
分类:
其他好文 时间:
2018-10-30 17:30:01
阅读次数:
186
1、功能实现 今天到现在为止实战课程的访问量(准实时,可设置为一定的间隔) 今天到现在为止从搜索引擎引流过来的实战课程的访问量(分析广告费用实际效果) 2、项目流程 3、环境参数 centos 6.4 cdh 5.7(生产中用,较稳定) idea jdk 1.8 scala 2.11.8 spark ...
分类:
其他好文 时间:
2018-10-27 16:38:38
阅读次数:
85
摘要:前言其实cloudera已经做了这个事了,只是把kafka的包和cdh的parcel包分离了,只要我们把分离开的kafka的服务描述jar包和服务parcel包下载了,就可以实现完美集成了。具体实现的简要步骤可参照cloudera官网提供的文档:http://www.cloudera.com/ ...
分类:
其他好文 时间:
2018-10-24 12:00:57
阅读次数:
221
jdk成功安装 java -version 正确显示版本 echo $JAVA_HOME 正确输出路径 但CDH链接数据库还是报错: Error: JAVA_HOME is not set and Java could not be found 解决办法 mkdir -p /usr/java 在/u ...
分类:
编程语言 时间:
2018-10-23 14:44:32
阅读次数:
1124
商业发行版主要是提供了更为专业的技术支持,这对于大型企业更为重要,不同发行版都有自己的一些特点,本文就各发行版做简单对比介绍。对比版选择:DKhadoop发行版、cloudera发行版、hortonworks发行版、MAPR发行版、华为hadoop发行版Hadoop是一个能够对大量数据进行分布式处理的软件框架。Hadoop以一种可靠、高效、可伸缩的方式进行数据处理。Hadoop的发行版除了有Apa
分类:
其他好文 时间:
2018-10-19 19:22:58
阅读次数:
118
cdh地址http://archive-primary.cloudera.com/cdh5/cdh/5/添加sudo权限的无密码访问的hadoop用户#useraddhadoop#vi/etc/sudoershadoopALL=(root)NOPASSWD:ALL#su-hadoop下载解压缩[hadoop@hadoop000softwore]$wgethttp://archive-primary
分类:
其他好文 时间:
2018-10-18 20:18:48
阅读次数:
152
HDFS概述及设计目标 如果让我们自己设计一个分布式文件存储系统,怎么做? HDFS设计目标 非常巨大的分布式文件系统 运行在普通廉价的硬件上 易扩展,为用户提供性能不错的文件存储系统 HDFS架构 如果让我们自己设计一个分布式文件存储系统,怎么做? HDFS设计目标 非常巨大的分布式文件系统 运行 ...
分类:
其他好文 时间:
2018-10-13 22:49:15
阅读次数:
205
###通过http://192.168.50.200:7180/cmf/login 访问CM控制台 4.CDH安装 4.1CDH集群安装向导 1.admin/admin登陆到CM 2.同意license协议,点击继续 3.选择60试用,点击继续 4.点击“继续” 5.输入主机IP或者名称,点击搜索找 ...
分类:
其他好文 时间:
2018-10-13 18:09:34
阅读次数:
293