紧急出个差，但是又不能不继续写，少写点，先把Shard key和Hash的一些小概念继续写一写。Shard KeysmongoDB的Sharding最重要的就是Shard Key。用Shard Key进行分片，并且按照指定的Chunk的大小进行Chunk的分割和移动(后面细说)。Shard Key的一些特点：Shard Key不可以是multikey index
何为mutikey index？途...
分类：
数据库 时间：
2015-03-10 00:13:05
阅读次数：
223
Hadoop中决定map个数的的因素有几个，由于版本的不同，决定因素也不一样，掌握这些因素对了解hadoop分片的划分有很大帮助，并且对优化hadoop性能也很有大的益处。旧API中getSplits方法: 1 public InputSplit[] getSplits(JobConf job, i...
分类：
其他好文 时间：
2015-03-09 00:17:56
阅读次数：
345
一、Bmob简介（1）数据服务
支持丰富的数据类型，灵活方便的增删改查，可视化的数据操作，安全的角色和ACL管理，多表关联处理，数据的批量处理，本地数据缓存，开发者们无需关注服务器后端，就可以实现多平台的同步开发。
（2）文件服务
文件服务允许上传任何的文件类型，支持分片断点续传，此外，针对移动端对图片业务的需求，还提供了生成高压缩比的缩略图服务。
（3）推送服务
提供了Android和i...
分类：
其他好文 时间：
2015-03-07 17:16:02
阅读次数：
259
创建TCP客户端 Client client = new TransportClient()
.addTransportAddress(new InetSocketTransportAddress(
"localhost", 9300)); 创建索引
client.admin().indices().pr...
分类：
编程语言 时间：
2015-03-06 17:31:13
阅读次数：
304
分片的一些概念与细节Primary Shard在Replica set中有Primary和Secondary的概念，那么在Sharding中其实也有一个Primary的概念。
任何一个mongoDB中都有一个未分区的整体DB的collection在某一个Shard中。如下图。
Collection1在ShardA中有一部分Chunks在ShardB中也有一部分Shards，而在ShardA...
分类：
数据库 时间：
2015-03-05 23:49:19
阅读次数：
385
1、用于map的输入，先将输入数据切分成相等的分片，为每一个分片创建一个map worker,这里的切片大小不是随意订的，一般是与HDFS块大小一致，默认是64MB，一个节点上存储输入数据切片的最大size就是HDFS的块大小，当设置的切片size大于HDFS块大小，会引起节点之间的传输，占用带宽。...
分类：
其他好文 时间：
2015-03-03 21:58:56
阅读次数：
138
ElasticSearch 集群首先看下ElasticSearch（ES）的架构：术语解释：cluster：代表一个集群，集群中有多个节点，其中有一个master节点，master通过选举自动产生；shards：代表索引分片，ES可以把一个完整的索引分成多个分片，并将它们分布到不同的节点上，从而构成...
分类：
其他好文 时间：
2015-03-03 20:29:06
阅读次数：
196
3.3 分片底衬仓库（TiledBackingStore）的可见区域矩形
如下图所示，WebCore::Frame::tiledBackingStoreVisibleRect最终请求QGraphicsWebView给出可见区域:
3.4 使分片底衬仓库无效
如果frame内容所在的矩形变脏了，WebCore::Frame会使这个矩形变成无效区域，同时告诉分片...
分类：
其他好文 时间：
2015-03-03 13:38:09
阅读次数：
132
3.Qt WebKit之QGraphicsWebView
本节叙述如何通过Qt的QGraphicsWebView实现分片底衬存储区（tiled
backing store）。
如上静态类图所示，只有实现了分片底衬存储区客户端（TiledBackingStoreClient）的接口的WebCore::Frame才拥有分片底衬存储区实例。其他类只能通过WebCore::Fra...
分类：
其他好文 时间：
2015-03-03 11:40:08
阅读次数：
170
为何需要水平分片1 减少单机请求数，将单机负载，提高总负载2 减少单机的存储空间，提高总存空间。下图一目了然：mongodb sharding 服务器架构简单注解：1 mongos 路由进程， 应用程序接入mongos再查询到具体分片。2 config server 路由表服务。 每一台都具有全部c...
分类：
数据库 时间：
2015-03-02 12:54:09
阅读次数：
243
