摘要:随着大数据的不断发展,非关系型的数据库现在成了一个极其热门的新领域,非关系数据库产品的发展非常迅速。现今的计算机体系结构在数据存储方面要有庞大的水平扩展性,而NoSQL也正是致力于改变这一现状。目前Google的 BigTable和Amazon 的Dynamo使用的就是NoSQL型数据库,本文...
分类:
数据库 时间:
2015-09-01 10:40:40
阅读次数:
255
概述 kafka是由LinkedIn设计的一个高吞吐量、分布式、基于发布订阅模式的消息系统,使用scala编写,它可以水平扩展、可靠性、异步通信和高吞吐量等特性而被广泛使用。 基本概念 Topic:Kafka把接收的消息按种类划...
分类:
其他好文 时间:
2015-08-31 17:45:21
阅读次数:
219
先介绍了一下公有云计算环境下的一些特点,再根据这些特点探讨一下作为云计算用户而言,如何对应用程序做好自动化部署和水平扩展(弹性计算)的问题。阅读本文需要有一定的云计算知识、开发运维知识。公有云环境的优势及其特点公有云为企业用户或个人用户(以下统称为用户)可..
分类:
其他好文 时间:
2015-08-31 17:30:17
阅读次数:
162
学习了基于Scala的Actor之上的分布式并发消息驱动框架Akka初体验,应用actor模型,位置透明,做到高并发、可伸缩、容错、单机也可以用,水平扩展、垂直扩展、容错都有很好的表现,spark中的例子如下:private def initializeEventProcessActor(){ im...
分类:
其他好文 时间:
2015-08-20 10:18:50
阅读次数:
563
Vitess 是一个用于对 MySql 进行水平扩展的存储平台。经过优化,它可以像在专用硬件上那样有效地运行在云架构。它集 MySql 数据库的很多重要特性和 NoSQL 数据库的可扩展性于一体。...
分类:
数据库 时间:
2015-08-19 20:43:22
阅读次数:
296
一、简介
想来想去还是写个简介吧…
1.1 CloudFoundry
Cloud Foundry是VMware公司推出的一个开源PaaS云平台,似乎号称业界第一个。它支持多种框架、语言、运行时环境、云平台及应用服务,可以用于应用程序的部署和扩展。
它本身是基于Ruby on Rails编写的,有多个相对独立的子系统。系统之间通过消息机制(nats)通信,使平台在各层级都可水平扩展,既能在大...
分类:
系统相关 时间:
2015-07-29 19:19:52
阅读次数:
343
MongoDB分片存储的集群架构实现
如果需要存储大量数据,或者系统的读写吞吐量很大的时候,单个server就很难满足需求了。这个时候我们可以使用MongoDB的分片机制来解决这些问题。
分片的基本概念
分片(sharding)是一种水平扩展(horizontal scaling)的方式,把一个大的数据集分散到多个片服务器上,所有的片服务器将组成一个逻辑上的数据库来存储这...
分类:
数据库 时间:
2015-07-25 23:01:47
阅读次数:
219
HDFS Federation是为解决HDFS单点故障而提出的NameNode水平扩展方案。 允许HDFS创建多个NameSpace以提高集群扩展性和隔离性。 当前HDFS包含两层结构:? (1) Namespace 管理目录,文件和数据块。它支持常见的文件...
分类:
其他好文 时间:
2015-07-23 16:00:58
阅读次数:
170
1.简介RocketMQ是一个纯java、分布式、队列模型的开源消息中间件,前身是Metaq,当Metaq3.0发布时,产品名称改为RocketMQ.具有如下特点:能够保证严格的消息顺序提供丰富的消息拉取模式高效的订阅者水平扩展能力实时的消息订阅机制亿级消息堆积能力2.发展历程三个主要版本迭代:..
分类:
其他好文 时间:
2015-07-12 15:55:13
阅读次数:
156
什么是openstack?Openstack是开源的云操作系统,是开源的linux系统。位于基础设施层,是搭建云环境的工具。Openstack的项目Openstack的架构:nova服务:nova-计算服务:实例生命周期的管理提供基于RESTAPIHypervisor屏蔽,支持KVM,Xen,Hyper-v,Docker等。支持水平扩展neutr..
分类:
其他好文 时间:
2015-07-07 07:11:14
阅读次数:
217