Sheepdog，是由NTT的3名日本研究员开发的开源项目，主要用来为虚拟机提供块设备。其架构例如以下：以下，我们将从架构、模块等几个方面来介绍下：一、架构图如上图：採用无中心节点的全对称架构，无单点故障，存储容量和性能可线性扩展；新增节点通过简单配置可自己主动增加（IP:PORT），数据自己主动实...
分类：
其他好文 时间：
2015-01-14 16:44:13
阅读次数：
131
hadoop中重要的组成部分HDFS，它所发挥的重要作用是进行文件的后端存储。HDFS针对的是低端的服务器，场景为读操作多、写操作少的情况。在分布式存储情况下，比较容易出现的情况是数据的损害，为了保证数据的可靠和完整，实现了数据的检验和（checksum）和多副本放置策略等措施。在HDFS中采...
分类：
其他好文 时间：
2015-01-10 11:13:55
阅读次数：
325
作者：在路上（老李）DCD|DCAQQ群：384423770一、环境说明管理地址：AD:192.168.1.254ESXi01:192.168.1.201ESXi02:192.168.1.202ESXi03:192.168.1.203ESXi04:192.168.1.204vCenter:192.168.1.200VSAN地址:esxi01:172.16.20.201esxi02:172.16.20.202esxi03:172.16.20.203esxi04:..
分类：
系统相关 时间：
2015-01-07 19:09:16
阅读次数：
16732
作为一个程序员，在这种信息战争年代，处在了信息战争的一线，为了保护自己，不得不给自己多一点武装。有人说，程序员，80%的时间是用来写代码，我不敢苟同，因为我觉得实践固然重要，但那还是处于一种粗放式的阶段，懂得一些原理和形而上的东西，有时候能够让你不至于越陷越深，在程序的海洋中不可自拔。好读书，读好书，小弟不才，也学陶潜先生“好读书，不求甚解”。...
分类：
其他好文 时间：
2015-01-05 09:35:52
阅读次数：
207
newbie刚接触HBase，遇到几个初学者常见的关于HBase问题，这里就问题就不多做介绍，主要还是编码优化问题，下面专门介绍以下几点，希望对于初学者有所帮助。...
分类：
其他好文 时间：
2015-01-02 14:43:23
阅读次数：
245
一、前言 非关系型数据库（NoSQL = Not Only SQL）的产品非常多，常见的有Memcached、Redis、MongoDB等优秀开源项目，相关概念和资料网上也非常丰富，不再重复描述，本文主要引入Memcached和Redis与淘宝开源Tair分布式存储进行对比测试，由于各自适用场景不....
分类：
系统相关 时间：
2014-12-27 21:39:08
阅读次数：
310
通过京东技术演进和淘宝技术演进，探察未来技术和架构
我们从京东和淘宝技术架构演进，可以看出电商在发展过程中的必经之路：Mysql->Oracle->分布式计算和分布式存储->???未来...
分类：
其他好文 时间：
2014-12-23 22:45:54
阅读次数：
217
“兵马未动，粮草先行”，要想深入的了解hadoop，我觉得启动或停止hadoop的脚本是必须要先了解的。说到底，hadoop就是一个分布式存储和计算框架，但是这个分布式环境是如何启动，管理的呢，我就带着大家先从脚本入手吧。说实话，hadoop的启动脚本写的真好，里面考虑的地方非常周全（比如说路径中有...
分类：
其他好文 时间：
2014-12-22 10:49:29
阅读次数：
265
hadoop是有apache基金会所开发的分布式系统基础架构，其主要提供了两方面的功能：分布式存储和分布式计算。 其中分布式存储是分布式计算的基础，在hadoop的实现里面，提供了分布式存储的接口，并自己实现了一个分布式存储的实现即HDFS,但并不代表 hadoop只支持HDFS这一中实现，其同时支...
分类：
其他好文 时间：
2014-12-22 10:47:29
阅读次数：
164
了解hadoop，首先就需要先了解hadoop的数据流，就像了解servlet的生命周期似的。hadoop是一个分布式存储（hdfs）和分布式计算框架（mapreduce），但是hadoop也有一个很重要的特性：hadoop会将mapreduce计算移动到存储有部分数据的各台机器上。术语 Ma...
分类：
其他好文 时间：
2014-12-22 10:46:04
阅读次数：
270
