1、基本环境准备
[hadoop@hadoop html]$ sudo chkconfig iptables off 禁用防火墙
[hadoop@hadoop html]$ vi /etc/selinux/config
禁用selinux,SELINUX=disabled
注:保存重启系统
2、Cloudera Manager的离线安装包下载,构建CM本地源
[ha...
分类:
其他好文 时间:
2015-01-04 12:12:07
阅读次数:
365
DRBD(DistributedReplicatedBlockDevice)是Linux平台上的分散式储存系统。其中包含了核心模组,数个使用者空间管理程式及shellscripts,通常用于高可用性(highavailability,HA)丛集。DRBD类似磁盘阵列的RAID1(镜像),只不过RAID1是在同一台电脑内,而DRBD是透过网络。DRBD..
分类:
数据库 时间:
2015-01-03 21:09:55
阅读次数:
556
前言 hadoop是分布式系统,运行在linux之上,配置起来相对复杂。对于hadoop1,很多同学就因为不能搭建正确的运行环境,导致学习兴趣锐减。不过,我有免费的学习视频下载,请点击这里。 hadoop2出来后,解决了hadoop1的几个固有缺陷,比如单点故障、资源利用率低、支持作业类型少等问题,...
分类:
其他好文 时间:
2015-01-03 13:11:26
阅读次数:
310
高可用方案其实很多,而且有很多成本是非常低和简单的。比如你如果有一个网站,高可用最简单的就是nds+nginx+两台机器。
我们由于是客户的一个项目,dns申请是非常麻烦的,所以才考虑用keepalived+nginx做高可用方案。
从网上整理了HA常用组合。
heartbeat v2+crm
heartbeat v3+pacemaker
corosync+pacemaker
cman...
分类:
其他好文 时间:
2015-01-02 21:10:16
阅读次数:
232
一次惊心动魄的Percona XTRA Cluster DB数据修复过程 看后,让你不再担心MySQL难以修复。当然,最好提前做好MySQL HA方案。...
分类:
数据库 时间:
2014-12-31 18:34:03
阅读次数:
214
国内 Android 开发者信息:昵称GitHub博客介绍罗升阳Luoshengyang@csdnAndroid 源码分析邓凡平innost@csdn阿拉神农魏祝林android_tutor@csdnTrineatrinea trinea.cn性能优化 开源项目halzhanghalzhang ha...
分类:
移动开发 时间:
2014-12-31 18:04:11
阅读次数:
351
本文主要是比较三种分布缓存负载均衡的方法,第一种是最简单的将 key的hash值对机器数取模算法,第二种是一致性哈希算法,第三种是淘宝开源的缓存解决方案tair的均衡算法。下面来分析下这三种算法的优缺点。第一种:传统的数据分布方法,将key的hash值对机器数取模 这个算法的实现非常简单,计算ha....
分类:
其他好文 时间:
2014-12-31 17:50:33
阅读次数:
331
一、概述Ha,已经有两个月没有更新blog了。由于近排公司需要引入Spark相关技术,我也是作为技术攻关人员之一,在这段时间使用Spark遇到了挺多问题,跌的坑也比较多,这篇blog主要总结一下这段时间使用Spark遇到的一些问题。二、遇到的"坑"和爬坑思路1、SparkSqlonyarn-client模..
分类:
其他好文 时间:
2014-12-31 06:34:20
阅读次数:
1157
背景
tfs要求用gcc 4.1.2编译,两种方案1
是用centos5(自带gcc 4.1.2), 2
使用centos6
把gcc降到4.1.2。我使用的是第一个方法成功运行tfs,当做HA的时候问题来了,官方要求是用heartbeat
3.x,centos5是2.x。开始选择在centos5下编译heartbeat
3成功,但还需要编译pacemaker,编译的时...
分类:
Web程序 时间:
2014-12-30 20:46:35
阅读次数:
269