IP首部内有三个字段实现分片和重装：标识字段（ip_id）、标志字段（ip_off的3个高位比特）和偏移字段（ip_off的13个低位
比特）。标志字段由3个1bit标志组成。比特0是保留的必须为0,；比特1是“不分片”（DF）标志；比特2是“更多分片”（MF）标志。
Net/3中，标志和偏移字段结合起来，由ip_off访问，如下图所示：
ip_off的其他13bit指出在原始数据报...
分类：
其他好文 时间：
2014-07-23 22:33:38
阅读次数：
505
代码测试环境：Hadoop2.4应用场景：当需要处理很多小数据文件的时候，可以应用此技巧来达到高效处理数据的目的。原理：应用CombineFileInputFormat，可以把多个小数据文件在进行分片的时候合并。由于每个分片会产生一个Mapper，当一个Mapper处理的数据比较小的时候，其效率较低。而一般使用Hadoop处理数据时，即默认方式，会把一个输入数据文件当做一个分片，这样当输入文件较小...
分类：
其他好文 时间：
2014-07-23 13:09:36
阅读次数：
281
互联网网站应用大多采用mysql作为DB存储，限于mysql单机性能的瓶颈，为了支撑更大容量和更大的访问量，dba一般通过建立分布式集群，让多个mysql共同提供服务。所谓的mysql分布式集群，实质就是将原有的数据拆成多份，放在多个mysql数据库上存储，应用通过中间层路由到对应的数据库分片...
分类：
数据库 时间：
2014-07-22 22:44:34
阅读次数：
304
###mongodb的复制集###注意点-服务器节点之前时间要同步-开启防火墙的一定要允许通过-开启selinux的也要进行设置-建立双击互信模式最好不过###主服务器配置文件-添加一行replSet=zhuima定义一个副本集[root@blog~]#sed-e‘/^#/d;/^$/d‘/etc/mongodb.conf
bind_ip=192.168.58.10
..
分类：
数据库 时间：
2014-07-21 22:38:27
阅读次数：
249
###开启auth认证的mongodb的复制集###注意点-服务器节点之前时间要同步-开启防火墙的一定要允许通过-开启selinux的也要进行设置-建立双击互信模式最好不过###提前要做的事情生产高端大气上档次的keyFile文件[root@redisjournal]#opensslrand-base64753
3LC/EZGPOLXdVBQInqeKVgl..
分类：
数据库 时间：
2014-07-21 22:25:17
阅读次数：
321
1、标准的序列操作：索引、分片、乘法、判断成员资格、求长度、取最大值和最小值2、python之删除命令的区别：>>>x[‘or‘,‘not‘,‘to‘,‘be‘,‘or‘,‘be‘]del：删除指定索引的值>>>delx[0]>>>x[‘not‘,‘to‘,‘be‘,‘or‘,‘be‘]pop：默认删除最后一个值>>..
分类：
编程语言 时间：
2014-07-21 15:14:17
阅读次数：
429
转载自LANCEYAN.COM按照上一节中《搭建高可用mongodb集群（三）—— 深入副本集》搭建后还有两个问题没有解决：从节点每个上面的数据都是对数据库全量拷贝，从节点压力会不会过大？数据压力大到机器支撑不了的时候能否做到自动扩展？在系统早期，数据量还小的时候不会引起太大的问题，但是随着数据量持...
分类：
数据库 时间：
2014-07-20 22:29:20
阅读次数：
505
MongoDB的分布式分片集群(shardingcluster)配置Shardingcluster介绍这是一种可以水平扩展的模式,在数据量很大时特给力,实际大规模应用一般会采用这种架构去构建monodb系统。要构建一个MongoDBShardingCluster,需要三种角色：ShardServer:mongod实例，用于存储实际的数据块，实..
分类：
数据库 时间：
2014-07-20 06:25:37
阅读次数：
383
先介绍几个术语：
MSS：最大段尺寸
1. 是应用层（TCP）与传输层之间的接口属性
2. 用于向对端TCP通告对端在每个TCP分节中能发送的最大TCP数据量。
3. 它经常设置成MTU减去IP和TCP首部的固定长度。
4. 它是一个16位的字段，限定最大值是65535，
5. 65535这个MSS值被视为表示“无限”的一个特殊值。
MTU：即...
分类：
其他好文 时间：
2014-07-19 23:32:40
阅读次数：
268
ICMP:http://blog.csdn.net/tigerjibo/article/details/7356936ARP:http://blog.csdn.net/tigerjibo/article/details/7351992IP分片：http://www.vants.org/?post=1...
分类：
其他好文 时间：
2014-07-18 08:03:11
阅读次数：
198
