当数据超过底层允许最大字节时（一个以太帧1514字节，14字节以太首部，20字节IP首部，UDP8/TCP20，因此IP包每次最大为1500==MTU。去掉协议头UDP有效数据1472字节，TCP为1460字节。）会进行IP分片。LwIP允许的最大IP由如下决定：IP_REASS_MAX_PBU.....
分类：
其他好文 时间：
2015-06-26 21:08:44
阅读次数：
538
容器： 序列：list 编号（索引） 映射：dict 名字（键） 集合：set 通用序列操作：索引、分片、加、乘、成员资格，python计算长度、找出最大值最小值内建函数索引：最后1个元素编号是-1分片：没指名开始结束点时，正数步长，序列头开始从左提取，负数步长，序列从尾部开始向左提取加：两种...
分类：
其他好文 时间：
2015-06-23 10:07:04
阅读次数：
121
环境 Docker version 1.6.2 ?mongodb 3.0.4 第一步 ?编写Dockerfile并生成镜像 ????主意包含两个Dockerfile镜像，一个mongod的，一个mongos（在集群中负责路由） ????编写Mongod的Dockerfile: FROM?u...
分类：
数据库 时间：
2015-06-22 19:25:59
阅读次数：
298
TCP/IP协议族-----7、网际协议版本4（IPv4）...
分类：
其他好文 时间：
2015-06-21 18:36:27
阅读次数：
120
sbk_buff中的data_len指的是尾部带的page数据的长度，len指的是总共的data的长度，len-data_len是第一个线性buf的数据长度。sk_buff->len:表示当前协议数据包的长度。它包括主缓冲区中的数据长度(data指针指向它)和分片中的数据长度。比如，处在网络层，le...
分类：
其他好文 时间：
2015-06-21 11:47:10
阅读次数：
155
1Redis客户端应用（jedis）、jedis分片1.1什么是jedis？jedis是针对Java提供的用来连接Redis服务器的客户端技术，就相当于连接数据库需要jdbc一样。（连接mysql需要使用jdbc、连接Redis需要使用Jedis）1.2Jedis客户端连接redis缓存步骤1.2.1第一种创建项目方式：一）下载Jedis..
分类：
其他好文 时间：
2015-06-20 01:39:50
阅读次数：
858
XLink 定义在 XML 文档中创建超级链接的标准方法。XPointer 允许这些超级链接指向 XML 文档中的更多具体部分（片断）。XLinkXLink 是 XML 链接语言（XML Linking Language）的缩写XLink 是用于在 XML 文档中创建超级链接的语言XLink 类似于...
分类：
其他好文 时间：
2015-06-17 14:50:19
阅读次数：
137
输入格式1、输入分片与记录
2、文件输入
3、文本输入
4、二进制输入
5、多文件输入
6、数据库格式输入1、输入分片与记录1、JobClient通过指定的输入文件的格式来生成数据分片InputSplit。
2、一个分片不是数据本身，而是可分片数据的引用。
3、InputFormat接口负责生成分片。InputFormat 负责处理MR的输入部分，有三个作用:
验证作业的输入是否规范...
分类：
其他好文 时间：
2015-06-15 00:19:57
阅读次数：
213
简述无论我们以怎样的方式从分片中读取一条记录，每读取一条记录都会调用RecordReader类；
系统默认的RecordReader是LineRecordReader，TextInputFormat；
LineRecordReader是用每行的偏移量作为map的key，每行的内容作为map的value；
而SequenceFileInputFormat的RecordReader是Sequenc...
分类：
其他好文 时间：
2015-06-14 22:54:12
阅读次数：
211
http://spark.apache.org/docs/1.2.1/streaming-programming-guide.html在SparkStreaming中如何对数据进行分片Level of Parallelism in Data ProcessingCluster resources c...
分类：
其他好文 时间：
2015-06-14 22:43:24
阅读次数：
211
