1:Hadoop分布式计算平台是由Apache软件基金会开发的一个开源分布式计算平台。以Hadoop分布式文件系统(HDFS)和MapReduce(Google MapReduce的开源实现)为核心的Hadoop为用户提供了系统底层细节透明的分布式基础架构。 Hadoop 中的分布式文件系统 HDF ...
分类:
其他好文 时间:
2017-10-09 19:42:54
阅读次数:
154
Install Kylin If you want to have multiple Kylin nodes please refer to this After Kylin started you can visit http://your_hostname:7070/kylin. The use ...
分类:
Web程序 时间:
2017-10-07 14:46:48
阅读次数:
263
1、安装虚拟机 VMware workstation CentOS 镜像 安装Linux虚拟机:(在Win7上) 1)安装VMwareWorkstations(可修改配置) 2)添加CentOS镜像(启动安装 ->配置网络) 网络配置:NAT模式 网络重启:service network resta ...
分类:
其他好文 时间:
2017-10-01 13:11:47
阅读次数:
213
01_note_Hadoop的源起与体系介绍;实施Hadoop集群;CDH家族 解压tar包安装JDK以及环境变量配置 tar -xzvf jdkxxx.tar.gz to /usr/app/ (自定义app用来存放安装后的app) java -version 查看目前系统java版本以及环境 rp ...
分类:
编程语言 时间:
2017-09-28 11:36:28
阅读次数:
259
用了一周多的时间终于把CDH版Hadoop部署在了测试环境,本文将就这个部署过程做个总结。 一、Hadoop版本选择。 Hadoop大致可分为Apache Hadoop和第三方发行第三方发行版Hadoop,考虑到Hadoop集群部署的高效,集群的稳定性,以及后期集中的配置管理,业界多使用Cloude ...
分类:
其他好文 时间:
2017-09-22 17:57:40
阅读次数:
206
一、参与者 1、vdcId:租户 2、运营管理员 operator: 一种角色 创建开发商 审批外置服务,如:hadoop集群 审批内置服务,如:<API使用申请> 3、租户管理员 tenant: 一种角色 创建所属租户的API-Version 审批所属租户的内置服务,如:所属租户的的<API使用申 ...
一、概述1.实验使用的Hadoop集群为伪分布式模式,eclipse相关配置已完成;2.软件版本为hadoop-2.7.3.tar.gz、apache-maven-3.5.0.rar。二、使用eclipse连接hadoop集群进行开发1.在开发主机上配置hadoop①将hadoop-2.7.3.tar.gz解压到本地主机上②使用windows版本的hadoop中的bi..
分类:
系统相关 时间:
2017-09-07 14:48:47
阅读次数:
209
1. 系统环境Oracle VM VirtualBoxUbuntu 16.04Hadoop 2.7.4Java 1.8.0_111master:192.168.19.128slave1:192.168.19.129slave2:192.168.19.1302. 部署步骤在虚拟机环境中安装三台Ubun ...
分类:
系统相关 时间:
2017-09-05 19:05:05
阅读次数:
217
hadoop集群搭建了ha,初次启动正常,最近几天启动时偶尔发现,namenode1节点启动后一段时间(大约10几秒-半分钟左右),namenode1上namenode进程停掉,查看日志: 一、查阅资料后找到原因: 我是用start-al.sh启动的集群,journalnode(端口8485)是在n ...
分类:
编程语言 时间:
2017-08-29 12:44:36
阅读次数:
196
1、centos最小化安装很有可能没装vsftpd(这么说是因为,非最小化安装有可能装了的) chkconfig –list | grep vsftpd 没有任何反应 yum –y install vsftpd #-y的作用?回答安装过程中一切的问题 2、创建日志文件 touch /var/log/ ...
分类:
其他好文 时间:
2017-08-27 12:49:34
阅读次数:
145