目前题主手头上并行开发着三个Web
Project,独立开发调试,在开发过程中不断的摸索经验,并总结下来,希望能够不断的提升技术,代码更规范化。O(∩_∩)O~ 这三个Web
Project均由我一个人全权负责,包括前端的JS/CSS/HTML文件编辑,后端使用JAVA语言连接数据库(三种类型数据来...
分类:
其他好文 时间:
2014-05-22 01:50:05
阅读次数:
264
简介
nutch是一个用java实现的网络爬虫,但却不仅仅是一个爬虫。它还囊括了网页分析,索引,搜索等功能,所白了,可以当做一个搜索引擎来用。nutch的意义在于,为普通开发人员提供了一扇研究搜索引擎的窗户,让搜索引擎不再神秘。而且,由于nutch的不断发展,对性能以及并行批处理的要求不断提供,h....
分类:
其他好文 时间:
2014-05-22 01:21:40
阅读次数:
258
现在的服务器支撑上百万个并发 TCP 连接已经不是新闻。实现 C1000k
的常规做法是调整内核参数,提高文件数,降低每个连接的内存消耗。在今年的 BSDCan2014 会议上, Patrick Kelsey 介绍了把 FreeBSD
9.x 的 TCP/IP 协议栈移植到了用户态,并用于 WANP...
分类:
其他好文 时间:
2014-05-22 00:24:22
阅读次数:
301
你是否曾经有过要计算一个非常大的数据(几百GB)的需求?或在里面搜索,或其它操作——一些无法并行的操作。数据专家们,我是在对你们说。你可能有一个4核或更多核的CPU,但我们合适的工具,例如
grep, bzip2, wc, awk, sed等等,都是单线程的,只能使用一个CPU内核。借用卡通人物Ca...
分类:
系统相关 时间:
2014-05-21 23:53:33
阅读次数:
618
为了最有效地优化 Microsoft SQL Server
的性能,您必须明确当情况不断变化时,性能将在哪些方面得到最大程度的改进,并集中分析这些方面。否则,在这些问题上您可能花费大量的时间和精力,而性能却得不到明显的改善。以下大部分信息并不解决由多用户并发使用而引起的性能问题。“Maximizin...
分类:
数据库 时间:
2014-05-21 22:49:36
阅读次数:
440
从多任务OS开始,线程主要用来表示IO异步;而今随着4G和多核等的到来,计算密集型又热门起来了。
硬件价格和性能从低到高:
PC/Laptop multi core, memory shared
PC clusters
SuperComputers
假设一个理想并行计算机:每个处理器计算能力相同,忽略调度,
static thread 是对一个虚拟处理器的软件层面的抽象;
s...
分类:
其他好文 时间:
2014-05-21 08:17:39
阅读次数:
326
1、实验环境:
联想小型机:
操作系统:RedHat Enterprise LinuxServer release6.4(Santiago)
内核版本:Linux server1 2.6.32-358.el6.x86_64#1 SMP
CPU型号:Intel(R)Xeon(R)CPU
E7-4820 @2.00Ghz;...
分类:
系统相关 时间:
2014-05-21 07:32:49
阅读次数:
307
前些时候,同事在站点服务端使用SQlite存储一些临时数据,但是在多人并发的时候Sqlite会抛出异常:The database file is locked , database is locked,而且这个是在客户生产环境下提示出来的,开发环境很难重现,同事实在没辙,竟然想发动所有研发同事通过操作软件重现问题,我只能呵呵了。既然是Sqlite的原因,直接写个小程序测试下sqlite不就行了,而...
分类:
数据库 时间:
2014-05-21 07:13:51
阅读次数:
483
http://www.importnew.com/11229.html在大规模互联网应用中,负载均衡设备是必不可少的一个节点,源于互联网应用的高并发和大流量的冲击压力,我们通常会在服务端部署多个无状态的应用服务器和若干有状态的存储服务器(数据库、缓存等等)。一、负载均衡的作用负载均衡设备的任务就是作...
分类:
Web程序 时间:
2014-05-21 06:09:26
阅读次数:
456
1.With T AS () 中语句会单独生成执行计划2.MS
SQL数据库中已“页”的方式按顺序存储数据,如插入数据,会增加新的页,并将两页中数据平均分配,每一张未填满数据的页称为数据库碎片。3.避免使用GUID等无序列作为索引4.页压缩5.表分区,利用CPU多核特性并行操作数据库6.数据表数据量...
分类:
数据库 时间:
2014-05-21 03:30:33
阅读次数:
400