由于目前的生产环境 namenode ha都只是配置了一块磁盘，如果磁盘坏了，估计就game over了。所以想着怎样做namenode的元数据容错。后来查阅hdfs的相关配置，发现一个恰好可以解决该问题的配置: <property> <name>dfs.namenode.name.dir</nam ...
分类：
其他好文 时间：
2018-06-24 00:38:09
阅读次数：
169
双击热备在这个高度信息化的IT时代，企业的生产系统，业务运营，销售个支持以及日常管理环节越来越依赖计算机信息和服务，使得对高可用(HA)技术的应用需求大量上升，以便提供持续的，不间断计算机或网络vs服务器和web-server他们必须在同一个网段内，因为LVS转发包的时候，是直接修改了包目标的MAC地址，直接扔给了rs，基于MAC地址的修改是活动在OSI二层数据链路层的，工作在数据链路层的网络设备
分类：
其他好文 时间：
2018-06-22 13:49:35
阅读次数：
253
不多说，直接上干货！ 1、先每台机器的zookeeper启动（bigdata-pro01.kfk.com、bigdata-pro02.kfk.com、bigdata-pro03.kfk.com） 2、启动zkfc（bigdata-pro01.kfk.com上） [kfk@bigdata-pro01 ...
分类：
Web程序 时间：
2018-06-17 16:03:27
阅读次数：
489
一般来讲，多台服务器搭建成一个集群来运行相应的程序，这样会避免单点故障，同时提升服务器的承载能力。 高可用，可称为"HA"也叫做双机热备，同时实现高可用一般使用keepalived，且keepalived还支持负载均衡的作用。高可用原理是：一条心跳线同时连接两台服务器，若当中的一台服务器宕机了，备用 ...
分类：
其他好文 时间：
2018-06-15 20:54:51
阅读次数：
184
HashSet和Python中的Set差不多，都是为逻辑运算准备的，HashSet不允许数据有重复，且存入的时单值不是键值对。 HashTable和Dictionary差不多，但是他们的实现方式时不同的，Dictionary俗称字典，里面存放的时键值对，即KeyValuePair,且支持泛型，而Ha ...
1.按照HA的模式配置好后，在主上新建traffic-group-22.traffic-group-2ForcetoStandby3.新建traffic-group-2floatingip4.VirtualAddressList中选择VSIP属于哪个Traffic5.当traffice-group-2切换到BIGIPActive.COM后，两台设备为AS模式相关截图如下<br><
分类：
其他好文 时间：
2018-06-13 23:35:29
阅读次数：
194
环境： Spark2.1.0 、Hadoop-2.7.5 代码运行系统:Win 7在运行Spark程序写出文件(savaAsTextFile)的时候，我遇到了这个错误： 查到的还是什么window远程访问Hadoop的错误，最后查阅官方文档HADOOP-11064 后来在网上找到解决方案是:由于ha ...
分类：
编程语言 时间：
2018-06-13 11:45:34
阅读次数：
488
1 概述 在Hadoop 2.0.0之前，一个Hadoop集群只有一个NameNode，那么NameNode就会存在单点故障的问题，幸运的是Hadoop 2.0.0之后解决了这个问题，即支持NameNode的HA高可用，NameNode的高可用是通过集群中冗余两个NameNode，并且这两个Name ...
分类：
其他好文 时间：
2018-06-12 20:55:07
阅读次数：
174
