DPF(datapartioningfeature):优点:水平扩展,scaleout,支持0-999个node。sharenothing体系结构。缺点:1、上层应用是BI,分析处理,决策支持,数据集市,其SQL语句是复杂的、多样的(毕竟select*frombig_table这样的SQL语句只存在于实验环境和教学环境),这对表的分区键的选择..
分类:
其他好文 时间:
2016-01-24 13:05:03
阅读次数:
236
分库分表是解决mysql水平扩展的主要手段。 网上有关策略的讨论很多,主要是hash扩展、按时间扩展、按范围扩展等等。但真正想实施分库分表的朋友们往往觉得“策略听来终觉浅,觉知此事要代码”,因此本文的主要目的是给朋友们提供一个可实现架构。 JDBCTemplate和Hibernate 大家...
分类:
其他好文 时间:
2016-01-13 21:23:46
阅读次数:
151
MongoDB的库级锁MongoDB是目前最流行的NoSQL数据库,以其自然的文档型数据结构,灵活的数据模式以及简单易用的水平扩展能力而获得了很多开发人员的青睐。但是金无足赤人无完人,MongoDB不是没有它的一些弱点,比如说它的库级锁就是人们经常抱怨的一个性能瓶颈。简单来说MongoDB..
分类:
数据库 时间:
2016-01-13 20:02:42
阅读次数:
346
一、简介官方简介:l RocketMQ是一款分布式、队列模型的消息中间件,具有以下特点:l 能够保证严格的消息顺序l 提供丰富的消息拉取模式l 高效的订阅者水平扩展能力l 实时的消息订阅机制l 亿级消息堆积能力二、网络架构三、特性1. nameserver相对来说,nameserver的稳定性非常高...
分类:
其他好文 时间:
2015-12-25 11:48:28
阅读次数:
388
nova conductor是一个RPC 服务,所有支持的API都在nova.conductor.rpcapi.ConductorAPI它是stateless,可以水平扩展。优点:安全:如果没有conductor,每个nova-compute都会直接访问DB,那么任意一个host上的nova-com...
分类:
其他好文 时间:
2015-12-04 20:11:22
阅读次数:
120
nova conductor是一个RPC 服务,所有支持的API都在nova.conductor.rpcapi.ConductorAPI它是stateless,可以水平扩展。优点:安全:如果没有conductor,每个nova-compute都会直接访问DB,那么任意一个host上的nova-com...
分类:
其他好文 时间:
2015-12-04 18:20:56
阅读次数:
146
作者 郭俊 发布于infoq 2015年3月10日Kafka是由LinkedIn开发的一个分布式的消息系统,使用Scala编写,它以可水平扩展和高吞吐率而被广泛使用。目前越来越多的开源分布式处理系统如Cloudera、Apache Storm、Spark都支持与Kafka集成。InfoQ一直在紧.....
分类:
其他好文 时间:
2015-11-27 19:16:09
阅读次数:
223
OpenStack组成项目.计算服务(Nova)核心项目,按需提供计算资源,创建和管理虚拟计算机支持多种Hypervisor:vmwarekvmhyper-v架构灵活,支持分布式部署,水平扩展动态虚拟机管理:创建、重启、调整大孝迁移.对象存储服务(Swift)也就是我们说的云存储,适合存储一次写入,多次读..
分类:
其他好文 时间:
2015-11-12 12:03:03
阅读次数:
273
MySQL复制: 扩展: scaleon:向上扩展,垂直扩展 scaleout:向外扩展,水平扩展 1,4G:50concurrent 2*8=16,32G,300 MySQL保存二进制日志: statement row mixed 默认为异步工作模式 SLAVE: IOthread:向主服务请求二进制日志中的事件 SQLthread:从中继日志读取..
分类:
数据库 时间:
2015-10-14 01:49:26
阅读次数:
280
akka提供了可伸缩的实时事务处理功能。akka基于actor,并提供了位置透明。1GB的heap可以有2500000个actor。水平扩展,垂直扩展,容错3个方面的解决方式。树形结构的actor,每个actor都有状态和行为。DT大数据梦工厂微信公众账号:DT_Spark。DT大数据梦工厂的微信公众号是DT_Spark..
分类:
其他好文 时间:
2015-09-12 00:59:22
阅读次数:
253