php模拟多线程用到curl库,这个库很强大,可以做好多事,比如模拟登陆,文件上传/下载,数据采集等。
下面是我的代码,很简单,有些还功能还不会用。 0);$res=array();for($j=0;$j 这段代码就是并行爬取百度和谷歌的代码,以后再慢慢完善。
...
分类:
Web程序 时间:
2014-05-27 02:50:52
阅读次数:
282
一、 Oracle集群体系结构Oracle RAC,全称是Oracle Real
Application Cluster,即真正的应用集群,是oracle提供的一个并行集群系统,整个集群系统由Oracle Clusterware
(集群就绪软件)和 Real Application Clusters...
分类:
数据库 时间:
2014-05-23 11:33:51
阅读次数:
511
一、
Trunk: 主干,主工作目录,是所有开发功能的,最新版的,测试的,开发中的
Branch: 分支,可以多人与主干并行开发、修改bug、较大改动
Tags: 类似工作中的一个快照,保存特定版本,可以是Trunk,Branch的一个特定点上的快照
实际上,branh和tag都是trunk的copy。
模式:分支开发,主干发布。
二、Merge...
分类:
其他好文 时间:
2014-05-22 10:17:38
阅读次数:
578
为了无阻塞地实现并发通信及处理,设计了一种流水线线程池模式。流水线结构保证了各个客户工作在大粒度上并行化,线程池技术保证了处理器资源的最大利用,可以显著提高系统的吞吐能力。另一个附加好处,是可以让VIP获得高级优先级。...
分类:
其他好文 时间:
2014-05-22 10:14:58
阅读次数:
356
目前题主手头上并行开发着三个Web
Project,独立开发调试,在开发过程中不断的摸索经验,并总结下来,希望能够不断的提升技术,代码更规范化。O(∩_∩)O~ 这三个Web
Project均由我一个人全权负责,包括前端的JS/CSS/HTML文件编辑,后端使用JAVA语言连接数据库(三种类型数据来...
分类:
其他好文 时间:
2014-05-22 01:50:05
阅读次数:
264
简介
nutch是一个用java实现的网络爬虫,但却不仅仅是一个爬虫。它还囊括了网页分析,索引,搜索等功能,所白了,可以当做一个搜索引擎来用。nutch的意义在于,为普通开发人员提供了一扇研究搜索引擎的窗户,让搜索引擎不再神秘。而且,由于nutch的不断发展,对性能以及并行批处理的要求不断提供,h....
分类:
其他好文 时间:
2014-05-22 01:21:40
阅读次数:
258
你是否曾经有过要计算一个非常大的数据(几百GB)的需求?或在里面搜索,或其它操作——一些无法并行的操作。数据专家们,我是在对你们说。你可能有一个4核或更多核的CPU,但我们合适的工具,例如
grep, bzip2, wc, awk, sed等等,都是单线程的,只能使用一个CPU内核。借用卡通人物Ca...
分类:
系统相关 时间:
2014-05-21 23:53:33
阅读次数:
618
打算看《php和mysql
web开发》来学习php,所以也算是这本书的学习笔记吧,也按照书里的例子来练习,但是也有些取舍。第一章是一个订单表单的例子,php用于处理提交的表单。
1.先创建订单表单orderform.html: 代码如下: ...
分类:
Web程序 时间:
2014-05-20 08:12:37
阅读次数:
463
异步IO
在操作系统中,程序运行的空间分为内核空间和用户空间。我们常常提起的异步I/O,其实质是用户空间中的程序不用依赖内核空间中的I/O操作实际完成,即可进行后续任务。同步IO的并行模式多线程单进程
多线程的设计之处就是为了在共享的程序空间中,实现并行处理任务,从而达到充分利用CPU的效果。多.....
分类:
Web程序 时间:
2014-05-19 12:46:00
阅读次数:
529