谷歌技术"三宝"之BigTable2006年的OSDI有两篇google的论文,分别是BigTable和Chubby。Chubby是一个分布式锁服务,基于Paxos算法;BigTable是一个用于管理结构化数据的分布式存储系统,构建在GFS、Chubby、SSTable等google技术之上。相当多...
分类:
其他好文 时间:
2015-02-12 13:51:17
阅读次数:
368
《FastDFS分布式存储实战》一、技术选型二、FastDFS相关组件及原理FastDFS介绍FastDFS架构FastDFS工作流程上传同步机制下载文件合并原理三、实验环境说明四、FastDFS部署初始化系统安装libfastcommon和fastdfsstorageserver安装nginx配置mod_fastdfs.conf配置下载网关tracker和..
分类:
其他好文 时间:
2015-02-09 16:19:33
阅读次数:
115
最近几天,一直在学习nginx在windows平台下的使用,为了寻找几种大量图片分布式存储而且有相对简单的存储方案 nginx是一种,还找到一种MongoDB GridFS 这两种方案我还是比较中意的,经过今天的奋斗,终于将nginx做图片分布式存储这个方案的搭建环境建立起来了,GridFS在后续....
学习笔记:王家林老师的hadoop课程链接:http://edu.51cto.com/course/course_id-1151.htmlHadoop---适合海量数据的分布式存储与计算平台存储与计算平台:Hadoop是一个平台,在这个平台上可以实现存储与计算分布式:单虚拟机程序变为多虚拟机程序,也就是我的一个计算任务可以..
分类:
其他好文 时间:
2015-01-31 02:03:51
阅读次数:
218
分布式存储系统按照所存储的数据对象不同,分为四类:分布式文件系统(存储图片、音频、视频等非结构化的Blob对象、定长块以及大文件等)、分布式表格系统(存储关系较为复杂的半结构化数据)、分布式键值系统(存储关系简单的半结构化数据)和分布式数据库(存储结构化数据)等。...
分类:
其他好文 时间:
2015-01-31 00:31:16
阅读次数:
176
随着国内云主机技术日趋成熟,云主机的优势越来越明显,用户对云主机的态度也由观望变为乐于尝试。国内各大云主机商也放低姿态,产品设置和定价上逐渐迎合个人用户和中小型企业用户的需求。云主机的诸多好处:集群计算、处理能力可弹性伸缩、分布式存储、故障率低,部署快速,性能更稳定,能够有效降低开发维护的难度和整体...
分类:
其他好文 时间:
2015-01-29 12:29:23
阅读次数:
227
从本质上来说,Hadoop就是提供了分布式存储(HDFS)与分布式计算(MapReduce)的服务。...
分类:
其他好文 时间:
2015-01-29 09:27:50
阅读次数:
202
近日来申请通过CSDN准专家,为了顺利在六个月后升级为认证专家,并对得起这个勋章,我感觉 不能松懈博客的更新频率以及质量了。C/C++ windows下的开发是我相对来说做的比较多的地方,对于Linux下的服务器开发
等等也算是半路出家,恰逢近来在研究分布式存储,涉及到了 Nginx 扩展开发以及配置,查阅了好多的资料发现Nginx配置部署起来相当的容易,但是源代码是真的晦涩难懂,经常会看的我...
分类:
其他好文 时间:
2015-01-29 00:08:28
阅读次数:
223