目录 前言 core-site.xml hdfs-site.xml mapred-site.xml yarn-site.xml 一、HDFS HDFS的设计理念 HDFS的缺点 1、NameNode 1.1、namenode的作用 1.2、元数据目录说明 1.3、NameNode启动 2、Secon ...
分类:
其他好文 时间:
2020-02-18 09:58:41
阅读次数:
100
As we said, sqlsever fail over cluster is perviously version of always on. The HA was guarenteed by OS not database. Therefor, we can not use windows ...
分类:
数据库 时间:
2020-02-16 20:20:37
阅读次数:
110
生产环境中一台mysql主机存在单点故障,所以要确保mysql的高可用性,即两台MySQL服务器。如果其中有一台MySQL服务器挂掉后,另外一台能立马接替其进行工作。主要介绍利用 keepalived 实现 MySQL 数据库的高可用。 Keepalived+mysql双主来实现MySQL-HA,我们必须保证两台MySQL数据库的数据完全一样。
分类:
数据库 时间:
2020-02-16 14:51:40
阅读次数:
151
错误: hadoop Requested data length 86483783 is longer than maximum configured RPC length 解决: 修改NameNode的hdfs-site.xml配置文件,添加以下配置: <property> <name>ipc.m ...
分类:
其他好文 时间:
2020-02-14 18:14:56
阅读次数:
74
NameNode&Secondary NameNode 工作机制 NameNode: 1.启动时,加载编辑日志和镜像文件到内存 2.当客户端对元数据进行增删改,请求NameNode 3.NameNode记录操作日志,更新滚动日志 4.日志记录完成,在NameNode内存中对元数据进行操作 edits ...
分类:
其他好文 时间:
2020-02-14 13:17:05
阅读次数:
86
package com.zhileiedu.zk; import java.util.Random; import javax.net.ssl.SSLEngineResult.Status; import org.apache.zookeeper.CreateMode; import org.apa ...
分类:
其他好文 时间:
2020-02-13 19:06:02
阅读次数:
94
1: 2: ha.get(it.next());可以获得值 ...
分类:
其他好文 时间:
2020-02-12 21:52:20
阅读次数:
58
RabbitMQ的mirror queue(镜像队列)机制是最简单的队列HA方案,它通过在cluster的基础上增加ha-mode、ha-param等policy选项,可以根据 需求将cluster中的队列镜像到多个节点上,从而实现高可用,消除cluster模式中队列内容单点带来的风险。 在使用镜像 ...
分类:
其他好文 时间:
2020-02-10 14:08:05
阅读次数:
79
简介首先,老规矩,下代码前先了解md5的几个函数 python中digest()和hexdigest()区别: 其中 hash.digest()返回摘要,作为二进制数据字符串值 hash.hexdigest()返回摘要,作为十六进制数据字符串值 源码如下: #md5进行数据的加密 import ha ...
分类:
编程语言 时间:
2020-02-08 17:41:46
阅读次数:
67
1131 cd /apps/hadoop/hdfs/namenode/ 1132 rm -rf current in_use.lock 1133 cd /apps/hadoop/hdfs/data/ 1134 rm -rf current in_use.lock 1135 cd /hadoop/hd ...
分类:
其他好文 时间:
2020-02-08 11:25:21
阅读次数:
80