安装配置DRBD定义:DRBD(DistributedReplicatedBlockDevice)分布式块设备复制:是linux内核存储层中的一个分布式存储系统,可利用DRBD在两台linux服务器之间共享块设备,文件系统和数据,类似于一个网络RAID1的功能两台服务器间就算某台服务器出现断电或者宕机也不会对数据有任..
分类:
其他好文 时间:
2015-06-27 00:04:02
阅读次数:
230
Sheepdog,由NTT的3日本研究人员开发的开源项目,主件装备用来提供一个虚拟机。它的建筑,如以下:以下,我们将从架构、模块等几个方面来介绍下:一、架构图如上图:採用无中心节点的全对称架构。无单点故障。存储容量和性能可线性扩展;新增节点通过简单配置可自己主动增加(IP:PORT),数据自己主动实...
分类:
其他好文 时间:
2015-06-23 15:31:30
阅读次数:
109
转自于:http://www.cnblogs.com/shanno/p/3958298.html?utm_source=tuicool数据分布是分布式存储系统的一个重要部分,数据分布算法至少要考虑以下三个因素:1) 故障域隔离。同份数据的不同副本分布在不同的故障域,降低数据损坏的风险;2) 负载均衡...
分类:
编程语言 时间:
2015-06-19 18:17:32
阅读次数:
190
场景描述:近期需要实现将Windows下TG级别的文档,远程增量备份至分布式存储服务器,于是有了下面的设计:1、采用rsync,经过测试发现文件比较非常耗时,难以快速实现增量备份;2、采用Windows下的小工具FastCopy配合DOS脚本来实现快速增量备份;首先将备份服务器的备份目录自..
分类:
其他好文 时间:
2015-06-19 13:48:43
阅读次数:
1605
简介HBase(Hadoop Database)是一个多版本,高可靠性、高性能、面向列、可伸缩的分布式存储系统,利用HBase技术可在廉价PC Server上搭建起大规模结构化存储集群。
HBase利用Hadoop HDFS作为其文件存储系统。提供高可靠,高性能,列存储,可伸缩 ,实时读写,适用于非结构化数据存储的数据库系统。
HBase利用Hadoop MapReduce来处理HBase中的...
分类:
其他好文 时间:
2015-06-17 23:27:29
阅读次数:
407
一、大访问量,并发高1.负载均衡lvs+dr(directive-route)直接路由2.高可用 keepalived二、大数据存储1.分布式存储(MFS,FDFS,NFS)2.mysql(主从,分区)3.内存缓存(redis,memecache)三、网站加速1.CDN,智能DNS,反向代理(squ...
分类:
Web程序 时间:
2015-06-17 11:07:21
阅读次数:
183
动态应用,是相对于网站静态内容而言, 是指以c/c++、php、Java、perl、.net等 服务器端语言开发的网络应用软件,比如论坛、网络相册、交友、BLOG等常见应用。动态应用系统通 常与数据库系统、缓存系统、分布式存储系统等密不可分。 大型动态应用系统平台主要是针对于大流 量、高并发网站建....
分类:
Web程序 时间:
2015-06-16 10:42:31
阅读次数:
139
来自董飞的回答HBase:是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统,利用HBase技术可在廉价PC Server上搭建起大规模结构化数据集群。像Facebook,都拿它做大型实时应用Facebook's New Realtime Analytics System: HBase to P...
分类:
其他好文 时间:
2015-06-15 23:39:16
阅读次数:
161
HBase简介HBase – Hadoop Database,是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统,利用HBase技术可在廉价PC Server上搭建起大规模结构化存储集群。HBase是Google Bigtable的开源实现,类似Google Bigtable利用GFS作为其文件...
分类:
其他好文 时间:
2015-06-15 14:25:26
阅读次数:
93
构建高性能服务 ConcurrentSkipListMap和链表构建高性能Java Memcached场景缓存服务器是互联网后端服务中常用的基础设施。场景(一)图片服务器上存储了大量图片,为了提高图片服务的吞吐量,希望把热门的图片加载到内存中。场景(二)分布式存储服务,为提高访问吞吐,把大量的met...
分类:
其他好文 时间:
2015-06-14 20:01:52
阅读次数:
126