Linux服务器运行久时,系统时间就会存在一定的误差,一般情况下可以使用date命令进行时间设置,但在做数据库集群分片等操作时对多台机器的时间差是有要求的,此时就需要使用ntpdate进行时间同步。date命令:date :查看当前时间,结果如下:Tue Mar 4 01:36:45 CST 201...
分类:
其他好文 时间:
2015-06-12 14:48:42
阅读次数:
5437
理解MySQL——架构与概念写在前面:最早接触的MySQL是在三年前,那时候MySQL还是4.x版本,很 多功能都不支持,比如,存储过程,视图,触发器,更别说分布式事务等复杂特性了。但从5.0(2005年10月)开始,MySQL渐渐步入企业级数据库的 行列了;复制、集群、分区、分布式事务,这些企业级...
分类:
数据库 时间:
2015-06-11 01:51:49
阅读次数:
278
输入格式1、输入分片与记录
2、文件输入
3、文本输入
4、二进制输入
5、多文件输入
6、数据库格式输入1、输入分片与记录1、JobClient通过指定的输入文件的格式来生成数据分片InputSplit。
2、一个分片不是数据本身,而是可分片数据的引用。
3、InputFormat接口负责生成分片。InputFormat 负责处理MR的输入部分,有三个作用:
验证作业的输入是否规范...
分类:
其他好文 时间:
2015-06-10 22:34:49
阅读次数:
207
http://www.cnblogs.com/yuechaotian/archive/2012/10/31/2747951.html mongo-副本集分片测试 1. 启动一对副本集(增加分片参数) ?D:\mongodb>mongod --dbpath=d:\mongodb\db --port 2222 --replSet neu/127.0....
分类:
其他好文 时间:
2015-06-09 17:56:38
阅读次数:
156
Cluster简介 ????????Redis 3.0引入的cluster。cluster是具有有自动数据分片、容错、针对读取速度有了显著的提升、改进了AOF重写等的redis分布式实现。 ????Redis 集群是一个分布式(distributed)、...
分类:
其他好文 时间:
2015-06-08 13:34:35
阅读次数:
210
转自:http://blog.csdn.net/fengyily/article/details/42557841本人一直用的是CRtmpServer服务,在CRtmpServer服务中根据自已的想法也加入了许多功能,如通过http接口来加载配置等,苦于不支持HLS,自已添加ts分片水平又有限,思来...
分类:
其他好文 时间:
2015-06-02 10:55:23
阅读次数:
316
MongoDB3.0.1文档版本发布,目前国内还没有一个完整的文章阐述如何进行集群部署。...
分类:
数据库 时间:
2015-06-01 22:50:21
阅读次数:
293
Python中引用复制、分片复制、完整复制首先直接看例子:>>> l1=[1,2,3]
>>> l11 = l1
>>> l2=[4,5,l1]
>>> l2
[4, 5, [1, 2, 3]]
>>> l3 = l2[:]
>>> l3
[4, 5, [1, 2, 3]]
>>> import copy
>>> l4 = copy.deepcopy(l2)
>>> l4
[4, 5, [1, 2,...
分类:
编程语言 时间:
2015-06-01 18:49:26
阅读次数:
169
阅读目录背景虚拟桶(virtual buckets)实现总结背景关于数据分片讨论最多的是一致性hash,然而它并不是分布式设计中的银弹百试百灵。 在数据稳定性要求比较高的场景下它的缺点是不能容忍的。比如在Redis分布式缓存设计中,使用一致性Hash进行key分片存储,通过虚拟节点最大化降低添加或删...
Es查询的时候默认是随机从一些分片中查询数据,可以通过配置让es从某些分片中查询数据1:_local指查询操作会优先在本地节点有的分片中查询,没有的话再在其它节点查询。2:_primary:指查询只在主分片中查询3:_primary_first:指查询会先在主分片中查询,如果主分片找不到(挂..
分类:
其他好文 时间:
2015-05-29 18:30:50
阅读次数:
153