讨论了glusterfs对文件系统爬虫rsync/ls目录性能的现有优化措施和可能的进一步优化方案。优化思路是减少本地文件系统的元数据操作,减少fuse client的负载,减少req的网络轮询次数,减少一次网络通信时间,缓存预抓取,并发,异步,bulk 传输。...
分类:
其他好文 时间:
2014-05-05 13:24:35
阅读次数:
536
NTLM是NT LAN Manager的缩写,这也说明了协议的来源。NTLM 是 Windows NT
早期版本的标准安全协议,Windows 2000 支持 NTLM 是为了保持向后兼容。Windows
2000内置三种基本安全协议之一。1早期SMB协议在网络上传输明文口令。后来出现 LAN Ma...
分类:
其他好文 时间:
2014-05-04 12:04:20
阅读次数:
554
0.导言
昨天写了一篇关于《秘钥与公钥》的文章,写的比较简单好理解,有点儿像过家家,如果详细探究起来会有不少出入,今天就来详细的说明一下数据加密的原理和过程。这个原理就是大名鼎鼎SSL的加密原理,哦,对了,有人说上个月SSL刚爆出本年度最轰动的漏洞“心脏滴血”,可能危及全球好多互联网企业,那这个东....
分类:
其他好文 时间:
2014-05-04 11:46:18
阅读次数:
319
2.2MySQL Server 系统架构总的来说,MySQL
可以看成是二层架构,第一层我们通常叫做SQL Layer,在MySQL 数据库系统处理底层数据之前的所有工作都是在这一层完成的,包括权限判断,sql
解析,执行计划优化,query cache 的处理等等;第二层就是存储引擎层,我们通常叫...
分类:
数据库 时间:
2014-05-03 22:43:14
阅读次数:
491
有时候我们需要知道mysql数据库中的一些情况,好在php提供了一些内置方法与函数,大家了解下了。代码如下:";}?>代码如下:";}?>代码如下:代码如下:代码如下:代码如下:代码如下:代码如下:";
//输出表头echo "列名类型长度标志";$result = mysql_query("SEL...
分类:
数据库 时间:
2014-05-03 22:04:22
阅读次数:
417
java采用TCP传输时利用Socket和ServerSocket
Socket和ServerSocket
建立客户端和服务端
建立连接后,通过Socket中的IO流进行数据的传输。
关闭Socket
同样,客户端与服务端是两个独立的应用程序。
演示tcp传输
1. tcp分客户端和服务端
2. 客户端对应的对象是Socket,服务端对应的对象是ServerSock...
分类:
编程语言 时间:
2014-05-03 21:21:13
阅读次数:
361
网络编程的概念是:多个计算机通过软件编程的方式进行数据传输来达到数据交互的功能。...
分类:
其他好文 时间:
2014-05-03 21:04:24
阅读次数:
298
Twitter出道之初只是个奋斗在RoR上的小站点,而如今已拥有1.5亿的活跃用户,系统日传输tweet更多达4亿条,并已完成了以服务为核心的系统架构蜕变。
Twitter如今在世界范围内已拥有1.5亿的活跃用户,为了给用户生成timeline(时间轴)需支撑30万QPS,其firehose每秒同样生成22MB数据。整个系统每天传输tweet 4亿条,并且只需要5分钟就可以让一条tweet从Lady Gaga手中呈现到她3100万粉丝的屏幕上。当下Twitter系统的规模及强大的吞吐量确实惹人艳羡,然而在出...
分类:
其他好文 时间:
2014-05-03 16:49:26
阅读次数:
361
添加Expires和Cache-control头部
Expire和Cache-control实际上是HTTP中的缓存控制头部,它主要影响客户端的请求行为和服务器端的响应。
一.缓存的基本概念
这里的缓存,单指web的缓存。当web请求抵达缓存时,如果本地有缓存的副本且缓存未过期,那么就可以从本地读取数据或文档,这样便可以:
1. 减少冗余的数据传输,一定程度上减少服务器的流量...
分类:
Web程序 时间:
2014-05-03 15:51:40
阅读次数:
380
简单介绍两个概念:iSCSI:InternetSmallComputerSystemInterface.是一种基于TCP/IP的协议,用来建立和管理IP存储设备、主机和客户机等之间的相互连接,并创建存储区域网络(SAN)。SAN使得SCSI协议应用于高速数据传输网络成为可能,这种传输以数据块级别(block-level)在多个..
分类:
其他好文 时间:
2014-05-03 14:58:33
阅读次数:
659