默认是64MB,取值范围是1 MB 到 1024 MB.那修改会造成什么?下表简单总结:chunk size 调节splitting次数(碎片数)数据跨shard数目数据均匀网络传输次数migration次数单词migration 传输量查询速度变大减少变少不太均匀变少变少变大变快变小增多变多更均匀变多变多变小变慢在数据量很大的情况下,考虑网络带宽,如果发现带宽占满,可以考虑调小chunk siz...
分类:
数据库 时间:
2015-07-19 23:42:11
阅读次数:
337
sharding 指数据分片cluster 集群,一个集群包含了多个shards,每个shard都由一个replica set组成collection DB中的表的概念,只不过没有schema每个collection在sharding的场景下都分成了多个chunks,chunk大小可以设置chunk 如果超过设定大小,会被拆分成两个,splitting就是负责这个工作的后台进程。migrate指c...
分类:
数据库 时间:
2015-07-19 20:12:44
阅读次数:
242
1.memcache的slab chunk 就像公交车的坐位一样,有大小之分,还有活跃的状态。2.代码index.php -->插入数据,注意$value的大小和重复次数,跟chunk和其数量 有关connect("localhost",11211,2);$value=str_repeat("a",...
分类:
系统相关 时间:
2015-07-12 12:33:25
阅读次数:
167
1.把文本文件变为sequence file:
mahout seqdirectory -i file://$(pwd)/news/
-o file://$(pwd)/news-seq/ -c UTF-8 -chunk 64 -xm sequential
mahout seqdirectory -i file://$(pwd)/1/
-o file://$(pw...
分类:
其他好文 时间:
2015-07-10 22:19:24
阅读次数:
372
chunk的字节个数不固定,因为我要下班回家了,先不写了。 /frameworks/base/include/androidfw/ResourceTypes.h ????int8_t?wasDeserialized;
????int8_t?numXDivs;
????int8_t?numYDivs;
????...
分类:
其他好文 时间:
2015-07-08 21:03:50
阅读次数:
122
前言:当memcached中有100bytes的数据要存,但是122大小的仓库中chunk满了。并不会寻找更大的仓库去存储,而是把122仓库的旧数据T掉,这就是数据过期与删除机制。
1. 当某个值过期之后,并没有从内存中删除,在使用stats命令时,发现curr_items 依然存在。只是当你去get,取数据的时候为空,才会删除,然后在查看stats,显示正确的curr_items。也就是没有...
分类:
系统相关 时间:
2015-07-07 17:07:57
阅读次数:
134
addcslashes — 为字符串里面的部分字符添加反斜线转义字符addslashes — 用指定的方式对字符串里面的字符进行转义bin2hex — 将二进制数据转换成十六进制表示chop — rtrim() 的别名函数chr — 返回一个字符的ASCII码chunk_split — 按一定的字符...
分类:
Web程序 时间:
2015-07-07 10:44:24
阅读次数:
152
itext使用其实并不难就像javaswing一样通过调用各种组件来实现一系列功能。itext常用的基本模块(类)有Chunk,Phrase,Paragraph,Image.由于本文只是概括介绍itext,所以不在这里详细介绍了.但是我在这里推荐一下比较详细介绍itext的教程文档--Itextinaction2ndedition。这本书具..
分类:
其他好文 时间:
2015-07-01 06:24:35
阅读次数:
160
再读GFS的一些笔记。主要涉及GFS架构、Chunk大小选择的一些折中考量、元数据管理及锁、写数据流程、GFS一致性模型的理解、快照的实现原理、过期失效副本检测等几个问题。
分类:
其他好文 时间:
2015-06-25 08:55:09
阅读次数:
114
1. array_shift() 将数组第一个单元移出数据并返回。demo1:2.array_chunk()将一个数组分割成多个数组,后面参数控制单元数目array(0=>a,1=>b),1=>array(0=>c,1=>d),2=>array(0=>2));?>3.array_push()将传入的...
分类:
编程语言 时间:
2015-06-24 18:34:08
阅读次数:
135