cloudera manager 进到cluster里面,点击Dynamic Resource Pools,没做任何配置默认情况下,资源池里有个default资源组 hadoop jar /usr/lib/hadoop-mapreduce/hadoop-mapreduce-examples.jar ...
分类:
其他好文 时间:
2019-04-07 20:31:50
阅读次数:
203
生产环境中的redis绝大多数是以集群形态运行的,这篇博文简要介绍分布式集群的原理、优势,然后描述配置过程。 redis集群的原理 redis集群的原理简要介绍如下 redis集群的搭建过程 这里用6个实际来搭建集群,分为三组,每组包含一个主节点和一个从节点。搭建过程如下 安装集群插件 准备6个节点 ...
分类:
其他好文 时间:
2019-04-07 20:27:42
阅读次数:
198
概述 对redis来说,在学习和工作中,安装配置环节无疑是最简单的。无论是单机安装、sentinel主从还是cluster模式,都只需要一个安装包,每个节点给一个配置文件,然后使用配置文件启动就可以了。当然,在试验环节,我们可以连配置文件都省了,直接启动也是可以的。 这样说来,其实理解redis基础 ...
分类:
其他好文 时间:
2019-04-07 12:56:10
阅读次数:
158
一、Spark专业术语定义 二、 Spark的任务提交机制 一、Spark专业术语定义 从以下十五个方面描述spark概念。 1 application: spark应用程序 2 Driver:驱动程序 3 Cluster Mannger:集群管理器 4 Executor: 计算器 5 Worker ...
分类:
其他好文 时间:
2019-04-06 14:11:30
阅读次数:
124
一、安装haproxy作为端口转发服务器(主服务器:172.28.5.4,备服务器:172.28.5.8,浮点IP为:172.28.5.6) 1、下载 cd /usr/local/src wget https://github.com/haproxy/haproxy/archive/v1.5-dev ...
分类:
系统相关 时间:
2019-04-04 17:27:03
阅读次数:
210
开放远程连接 CentOS7 1、redis非本机要开放远程连接端口和配置 Jedis连接 依赖 单节点: 连接池 sentinel 集群 springboot redis 依赖 单节点使用 配置 配置类 使用 缓存使用 service接口 service实现 cluster 集群 配置:appli ...
分类:
编程语言 时间:
2019-04-03 13:58:21
阅读次数:
120
Redis Cluster 需求:1、请求量过大 100w/s 2、数据量大 1、数据分布 哈希分布特点: 数据分散度高 键值分布业务无关 无法顺序访问 支持批量操作 顺序分布特点: 数据分散度易倾斜 键值业务相关 可顺序访问 支持批量操作 2、数据分区 节点取余分区特点: 客户端分片:哈希 + 取 ...
分类:
其他好文 时间:
2019-04-03 12:36:41
阅读次数:
222
今天整理下redis-cluster操作命令 一、Cluster操作命令 ...
分类:
其他好文 时间:
2019-04-01 18:36:09
阅读次数:
193
三、集群客户端命令(redis cli c p port) 集群 cluster info :打印集群的信息 cluster nodes :列出集群当前已知的所有节点( node),以及这些节点的相关信息。 节点 cluster meet :将 ip 和 port 所指定的节点添加到集群当中,让它成 ...
分类:
其他好文 时间:
2019-03-30 13:32:59
阅读次数:
120
环境: OEL 5.7 + Oracle 10.2.0.5 RAC 需求: 更换存储,OCR、Voting disk同时需要更换到新存储。 "1.替换OCR" "2.替换voting disk" 1.替换OCR 替换OCR(Oracle Cluster Registry)首先需要关闭RAC所有节点的 ...
分类:
数据库 时间:
2019-03-29 01:19:11
阅读次数:
261