Reactor模式和NIO——转:本文可看成是对Doug Lea Scalable IO in Java一文的翻译。当前分布式计算 Web Services盛行天下,这些网络服务的底层都离不开对socket的操作。他们都有一个共同的结构:1. Read request2. Decode reques...
分类:
其他好文 时间:
2014-09-08 10:49:46
阅读次数:
805
【IT168评论】现如今,Apache Hadoop已经无人不知无人不晓。当年雅虎搜索工程师Doug Cutting开发出这个用以创建分布式计算机环境的开源软件库,并以自己儿子的大象玩偶为其命名的时候,谁能想到它有一天会占据“大数据”技术的头把交椅呢。 虽然Hadoop伴随大数据一同火爆起来,但相....
分类:
其他好文 时间:
2014-09-04 14:48:49
阅读次数:
160
MySQL集群安装与配置文章目录[隐藏]一、mysql集群安装二、节点配置三、首次启动节点四、测试服务是否正常五、安全关闭和重启MySQLCluster 是 MySQL 适合于分布式计算环境的高实用、高冗余版本。它采用了NDB Cluster 存储引擎,允许在1个 Cluster 中运行多个MySQ...
分类:
数据库 时间:
2014-09-04 01:26:27
阅读次数:
336
最近一直在学习hadoop一直没有梳理接触到的东西,常见算法分类:推荐系统(推荐引擎):基于用户的协同过滤算法UserCF近邻算法,容易实现基于物品的协同过滤算法ItemCF速度快,容易实现分布式计算SlopeOne算法@Deprecatedatmahout0.8KNNLinearinterpolationitem–based推荐算?.
分类:
其他好文 时间:
2014-09-03 18:29:07
阅读次数:
221
PXE网络装机在大规模的linux应用环境中,如web群集、分布式计算等,服务器往往并不配备光驱设备,这种情况下如何为数十乃至上百台服务器裸机快速安装系统?传统的USB光驱、移动硬盘等安装方法显然已经力所难及。接下来介绍的PXE(Pre-bootExcutionEnviroment,预启动环境)技术的..
分类:
其他好文 时间:
2014-09-03 02:49:27
阅读次数:
360
推荐,就是把你可能喜欢的商品,推到你的面前。构建一个推荐系统,就是构建如何把商品推到你面前的过程。
推荐是一个整体的计算过程,在编码中,关于算法的部分所占的工作量可能1%都不到;
构建一个千万PV级别的推荐系统相对容易,一天的日志不过几百M,计算过程中的数据,单台机器的内存可以存下,当PV达到几亿几十亿时,就需要进行稍微复杂一点的分布式计算了;
推荐的计算方法很多,如何选择,效果难以预料,只有通过横向和纵向多做效果分析,才有意义。...
分类:
其他好文 时间:
2014-08-30 13:57:19
阅读次数:
227
一、线程的定义1. 1 进程、应用程序域与线程的关系进程(Process)是Windows系统中的一个基本概念,它包含着一个运行程序所需要的资源。进程之间是相对独立的,一个进程无法访问另一个进程的数据(除非利用分布式计算方式),一个进程运行的失败也不会影响其他进程的运行,Windows系统就是利用进...
分类:
编程语言 时间:
2014-08-29 10:39:37
阅读次数:
226
Broker 模式采用 broker 模式对分布式计算进行简单模拟。系统在一个进程内模拟分布式环境,因此不涉及网络编程和进程间通信,Broker 通过本地函数调用的方式实现 request 和 response的转发。采用 broker 模式对分布式计算进行简单的模拟,要求如下:设计四个 serve...
分类:
其他好文 时间:
2014-08-26 00:19:35
阅读次数:
529
1:高可用性集群 强调的是高可用性。2:负载均衡集群 不强调高可用性,强调负载的均衡3:高吞吐集群 注重吞吐量,又叫做SIMD(single instruction multiple data),每个worker的功能相同,数据不同。4:分布式计算 又叫做MIMD(multiple inst...
分类:
其他好文 时间:
2014-08-23 19:02:41
阅读次数:
251