配置core-site.xml <configuration> <!-- 把两个NameNode）的地址组装成一个集群mycluster --> <property> <name>fs.defaultFS</name> <value>hdfs://mycluster</value> </proper ...
分类：
其他好文 时间：
2020-03-04 00:07:55
阅读次数：
86
在给学生授课和搭建Hadoop生态实验环境的过程中，我发现无论是网络上的参考资料、还是来自大数据服务功供应商的运维文档，给出Hadoop的HA解决方案都如出一辙——使用ZooKeeper加QuorumJournalManager方案。诚然，这一方案久经考验，是十分成熟的可靠方案。
分类：
其他好文 时间：
2020-03-01 00:08:41
阅读次数：
68
在搭好HA集群之后，想测试一下集群的高可用性，于是先把active的namenode给停掉： hadoop-daemon.sh stop namenode 或者直接kill掉该节点namenode的对应进程也可。 但是通过hdfs haadmin -getServiceState master1 查 ...
分类：
其他好文 时间：
2020-02-28 18:52:26
阅读次数：
101
一张参数图 通过此参考图，我们基本也就可以了解到关于hasura graphql-engine 如何提高稳定以及扩展 说明 如下的参考资料有关于autoscale 的一些问题说明，以及内部的一些设计，是很不错的资料 参考资料 https://github.com/hasura/graphql-eng ...
分类：
其他好文 时间：
2020-02-28 10:32:18
阅读次数：
71
此方法直接使用RKE进行集群恢复，它适用于RKE创建并导入的集群或者RKE部署的local集群 一、备份 "参考官网备份步骤" ，本文采用的是 RKE HA部署的，三台服务器都是 。 1.1 自动备份 RKEv0.2以后默认ETCD自动备份没有开启，需要使用额外的配置参数启用etcd snapsho ...
分类：
其他好文 时间：
2020-02-26 18:28:25
阅读次数：
235
前提是主从异步复制环境要提前搭建好，然后再开启mysql增强半同步 环境：mysql5.7.26 主从异步复制早已部署好。 1.加载plugin插件 建议master和slave上全部执行（考虑到MHA的主从自动切换的环境） 在主库安装semisync_master.so和semisync_slav ...
分类：
数据库 时间：
2020-02-24 16:38:24
阅读次数：
89
基于PGPool的双机集群如下图所示：pg主节点和备节点实现流复制热备，pgpool1，pgpool2作为中间件，将主备pg节点加入集群，实现读写分离，负载均衡和HA故障自动切换。两pgpool节点可以委托一个虚拟ip节点作为应用程序访问的地址，两节点之间通过watchdog进行监控，当pgpool ...
分类：
其他好文 时间：
2020-02-24 00:09:36
阅读次数：
521
Hadoop HA架构搭建 共七台服务器，节点角色分配如下： 192.168.133.21 （BFLN-01）：namenode zookeeper journalnadeDFSZKFailoverController192.168.133.23 （BFLN-02）：namenoderesource... ...
分类：
其他好文 时间：
2020-02-23 18:36:02
阅读次数：
91
从股票列表网页获取股票代码 根据股票代码去股票详情页面获取股票详细信息 1、 股票列表页面 凤凰网财经—股票信息 http://app.finance.ifeng.com/list/stock.php?t=ha&f=chg_pct&o=desc&p=1 2、 股票详细信息 老虎社区—股票详情 htt ...
分类：
其他好文 时间：
2020-02-22 20:00:00
阅读次数：
222
架构图（HA模型没有SNN节点） 用vm规划了8台机器，用到了7台，SNN节点没用 NN DN SN ZKFC ZK JNN RM NM node1 * * node2 * * node3 node4 * * node5 * * node6 * * * * node7 * * * * node8 * ...
分类：
其他好文 时间：
2020-02-22 15:50:37
阅读次数：
107
