Eclipse开发过程连接Hadoop集群环境,需要安装Hadoop插件。Hadoop源码包中有Eclipse插件源代码,需要自己动手编译。环境:Hadoop
1.2.1 & EclipseKepler & Windows 7 & JAVA
71、生成插件源码解压Hadoop安装包,找到src\co...
分类:
系统相关 时间:
2014-05-28 00:39:47
阅读次数:
542
HDFS的设计目标检测以及快速恢复硬件问题.流式的数据访问.移动计算比移动数据的代价小.简化一致性模型.超大规模数据集异构软硬件平台之间的可移植性.HDFS的结构模型HDFS是一个主从的结构模型.一个HDFS集群是由一个NameNode和若干个DataNode组成.NameNode主节点是主服务器....
分类:
其他好文 时间:
2014-05-27 17:39:15
阅读次数:
328
前言:在自动化、批量化操作主机的时候,有时候咱们需要定义主机组。比如,saltstack的group组,及salt-N参数,在ansible下的自己搞定ansible的主机组。有些麻烦,要知道,你既然选择了用saltstack、ansible这类的集群操作工具,如果你再选择把几十个多到几百个手动地,一个个..
分类:
数据库 时间:
2014-05-25 21:05:13
阅读次数:
520
负载均衡集群是由两台或者两台以上的服务器组成。分为前端负载调度和后端服务两个部分。负载调度部分负载把客户端的请求按照不同的策略分配给后端服务节点,而后端节点是真正提供营养程序服务的部分。与双机热备不同的是,负载均衡集群中,所有的后端节点都处于活动动态,它们都对外提供服务,分摊系统的工作负载。
负载均衡集群可以把一个高负荷的应用分散到多个节点共同完成,适用于业务繁忙、大负荷访问的应用系统。负载均衡...
分类:
其他好文 时间:
2014-05-25 10:56:23
阅读次数:
281
一、简介1、介绍MogileFS是一个开源的分布式文件系统,用于组建分布式文件集群,由LiveJournal旗下DangaInteractive公司开发,Danga团队开发了包括Memcached、MogileFS、Perlbal等不错的开源项目:(注:Perlbal是一个强大的Perl写的反向代理服务器)2、MogileFS的特性(1)工作..
分类:
其他好文 时间:
2014-05-25 08:37:04
阅读次数:
430
实验需求:部署MySQL集群,减少数据库单点故障。实验方案:准备5台服务器,mgmd(192.168.100.1)作为管理节点,sqlA(192.168.100.2)和sqlB(192.168.100.3)作为SQL节点,ndbA(192.168.100.4)和ndbB(192.168.100.5)作为数据节点,这5个节点构成MySQLCluster体系实施过程..
分类:
数据库 时间:
2014-05-25 05:40:46
阅读次数:
424
此配置为精简配置,若要基于安全考虑,请详细设置iptables的策略eth0为外网接口,eth1为内网接口intranet-->eth1-->nat-->eth0-->internetvim/etc/sysctl.conf
net.ipv4.ip_forward=1
sysctl-p
iptables-F
iptables-tnat-APOSTROUTING-oeth0-jMASQUERADE
iptables-..
分类:
系统相关 时间:
2014-05-25 04:51:21
阅读次数:
398
ASM单点故障
经常由用户询问如何避免ASM单点故障的最佳实践。与其他文件系统或卷管理器一样
ASM实例失效会导致运行在上面的RDBMS实例不可用。然而OS 文件系统或卷管理器失效
一般会伴随操作系统崩溃,而asm重启不需要重启服务器。
解决ASM单点故障的最好的办法是把ASM运行在RAC环境通过集群实现高可用。ASM可以
继续运行在其他节点如果一个节点重启或rdbms重启。ASM失效是...
分类:
数据库 时间:
2014-05-25 00:22:13
阅读次数:
489
A类:10.0.0.0~10.255.255.255B类:172.16.0.0~172.31.255.255C类:192.168.0.0~192.168.255.255上述三个范围内的地址不会在因特网上被分配,因此可以不必向ISP或注册中心申请而在公司或企业内部自由使用。NAT实现方式:静态转换、动态转换、端口多路复用1、静态转换:第一..
分类:
其他好文 时间:
2014-05-24 16:29:18
阅读次数:
350
iptables简介iptables是基于内核的防火墙,功能非常强大,iptables内置了filter,nat和mangle三张表。filter负责过滤数据包,包括的规则链有,input,output和forward;nat则涉及到网络地址转换,包括的规则链有,prerouting,postrouting和output;mangle表则主要应用在修改数..
分类:
其他好文 时间:
2014-05-24 15:31:32
阅读次数:
293