(1)配置集群 (a)配置hadoop-2.7.2/etc/hadoop/yarn-env.sh 配置一下JAVA_HOME export JAVA_HOME=/home/hadoop/bigdatasoftware/jdk1.8.0_161 (b)配置yarn-site.xml <!-- redu ...
分类:
其他好文 时间:
2019-02-26 23:50:03
阅读次数:
256
kafka_2.11-0.9.0.1.tgz 1.进入项目前的目录 cd /home/cjpt mkdir kafka #创建项目目录 cd kafka #进入项目目录 mkdir kafkalogs #创建kafka消息目录,主要存放kafka消息 2.进入配置文件目录 cd /home/cjpt... ...
分类:
其他好文 时间:
2019-02-22 19:52:56
阅读次数:
172
集群,是服务器管理的常用方式。集群是一组相互独立的、通过高速网络互联的计算机,它们构成了一个组,并以单一系统的模式加以管理。一个客户与集群相互作用时,集群像是一个独立的服务器。集群配置是用于提高可用性和可缩放性。Nginx反向代理也就是一个集群。 最简单的集群方案如下: 随着技术的发展,管理中心会变 ...
分类:
其他好文 时间:
2019-02-17 10:57:22
阅读次数:
170
配置文件: redis-cluster-config.properties: 开发中并不需要注意这些内容,只是需要注意开发逻辑即可 ...
分类:
编程语言 时间:
2019-02-13 21:17:32
阅读次数:
119
Hadoop集群包含1个主节点和3个从节点,需要实现各节点之间的免密码登录,下面介绍具体的实现方法。 一、Hadoop集群环境 二、免密登录原理 每台主机authorized_keys文件里面包含的主机(ssh密钥),该主机都能无密码登录,所以只要每台主机的authorized_keys文件里面都放 ...
分类:
其他好文 时间:
2019-02-13 10:59:14
阅读次数:
242
1、config server引入依赖 2、config server配置bootstrap.yml文件 3、访问application-prod.properties配置文件 4、config client配置bootstrap.yml文件4.1、单机配置安全验证 4.2、集群配置安全验证 ...
分类:
其他好文 时间:
2019-01-30 19:58:23
阅读次数:
164
从官网下载一个nginx事务tar.gz版本,centos系统,安装好jdk 第一步解压 第二步:解压完成进入解压目录,执行./configure命令 需要安装gcc编译和pcre库,zlib库 yum -y install gcc yum install pcre-devel yum instal ...
分类:
Web程序 时间:
2019-01-17 22:33:46
阅读次数:
212
创建一个redisservice RedisServise实现类 ...
分类:
其他好文 时间:
2019-01-17 10:51:14
阅读次数:
250
<! TOC "spark" "安装" "配置" "使用java来操作spark" <! /TOC spark 安装 配置 1. spark env.sh 2. slaves 3. 启动 使用java来操作spark 写个小demo,用来分析10万个数据中男女人数 1. 模拟数据的java代码 3. ...
分类:
编程语言 时间:
2019-01-17 00:34:28
阅读次数:
284
<! TOC "kafka" "安装" "修改配置文件" "java操作kafka" <! /TOC kafka kafka的操作相对来说简单很多 安装 修改配置文件 1. server.properties 2. 运行 java操作kafka 1. 依赖 2. 生产者 3. 消费者 ...
分类:
编程语言 时间:
2019-01-12 21:52:01
阅读次数:
294