我们在学习TCP/IP协议时都知道,TCP报文段如果很长的话,会在发送时发生分段,在接受时进行重组,同样IP数据报在长度超过一定值时也会发生分片,在接收端再将分片重组。 我们先来看两个与TCP报文段分段和IP数据报分片密切相关的概念。 MTU(最大传输单元) MTU前面已经说过了,是链路层中的网.....
分类:
其他好文 时间:
2015-07-14 19:34:35
阅读次数:
147
前言MongoDB是一个由C++语言编写的基于分布式文件存储的数据库,是当前NoSQL数据库中比较热门的一种,旨在为Web应用提供可扩展的高性能数据存储解决方案。本文介绍MongoDB复制集及数据分片。MongoDB简介MongoDB是一个介于关系数据库和非关系数据库之间的产品,是非关系数据库当..
分类:
数据库 时间:
2015-07-14 06:20:20
阅读次数:
268
1.基本操作 序列操作:索引,分片,乘法,判断成员资格,长度,最值......注:字符串不可变,分片赋值不合法2.字符串格式化模板 格式化字符串时,Python使用一个字符串作为模板。模板中有格式符,这些格式符为真实值预留位置,并说明真实数值应该呈现的格式。Python用一个tuple将多个值传.....
分类:
编程语言 时间:
2015-07-13 18:24:05
阅读次数:
146
一、概念: 分片(sharding)是指将数据库拆分,将其分散在不同的机器上的过程。将数据分散到不同的机器上,不需要功能强大的服务器就可以存储更多的数据和处理更大的负载。基本思想就是将集合切成小块,这些块分散到若干片里,每个片只负责总数据的一部分。通过一个名为mongos的路由进程进行操作,mon....
分类:
数据库 时间:
2015-07-11 14:48:50
阅读次数:
289
1.一个大坑:若实例化 JedisShardInfo 时不设置节点名称(name属性),那么当Redis节点列表的顺序发生变化时,会发生“键 rehash 现象”使用BTrace追踪redis.clients.util.Sharded的实时状态,验证“Jedis分片机制的一致性哈希算法”实现;发现一...
分类:
其他好文 时间:
2015-07-09 11:12:20
阅读次数:
838
mongodb版本:3.0.4准备:1、校验服务器的时间,3台同步2、关闭防火墙3、关闭selinuxSharding+Replica Sets 主机 IP 服务及端口Server A 192.168.31.231 mong...
分类:
数据库 时间:
2015-07-08 12:29:47
阅读次数:
141
网上大部分都是的mongo2.x集群分片了,咱写个3.04的。
由于公司采用磁盘阵列冗余存储,所以不考虑数据备份问题只是简单的分片存储数据进行测试的。
配置结构如图:
服务器配置:
cpu双核、8G内存、/shard目录挂载500G硬盘。
服务器列表:
IP
职能
192.168.6.117
config、m...
分类:
数据库 时间:
2015-07-07 19:37:03
阅读次数:
270
plupload批量上传分片功能,对于文件比较大的情况下,plupload支持分片上传,后台代码如下: /** * * 方法:upLoadSpecialProgramPictrue * 方法说明:本地节目导入 * @return * @autho...
分类:
Web程序 时间:
2015-07-06 19:47:33
阅读次数:
1275
笔者在项目中处理大文件上传的需求,仿照七牛云存储的接口设计。然而,在服务器端文件合并时遇到了很大的问题:合并太慢。本文记录了当时的思路和解决的方案 大文件的需求 文件上传是个很常见的需求。尽管HTTP是基...
分类:
其他好文 时间:
2015-07-06 18:14:34
阅读次数:
267
NIO里对性能提升最显著的是内存映射(memory mapping),内存访问的速度往往比文件访问的速度快几个数量级。 在内存映射之前,还需要看NIO的一些其他的特性。 缓冲区分片 slice()方法根据现有的缓冲区创建一个子缓冲区。也就是说,它创建一个新的缓冲区,新缓冲区与原来的缓冲区的一...
分类:
其他好文 时间:
2015-07-05 23:53:27
阅读次数:
135