做为论坛站点:有两种类型的数据要处理:1、结构化的数据:如:用户名、用户发表的评论等,这些可以存储在关系型数据库中:
2、非结构化的数据:如:用户上传的附件。则存储到文件系统中。论坛的架构:使用两台httpd服务器来服务用户的访问请求。使用DNS的A记录做客户访问轮循..
分类:
Web程序 时间:
2014-08-18 09:21:44
阅读次数:
377
一、架构二、唠叨一会原理:1、nginxNginx进程基于于Master+Slave(worker)多进程模型,自身具有非常稳定的子进程管理功能。在Master进程分配模式下,Master进程永远不进行业务处理,只是进行任务分发,从而达到Master进程的存活高可靠性,Slave(worker)进程所有的业务信号都由..
分类:
其他好文 时间:
2014-08-18 09:20:14
阅读次数:
454
服务器环境:httpd、php、MySQL、DNS、NFS共配置4台虚拟机,web服务各一台,PHP、DNS一台,MySQL、NFS一台。网段使用172.16.0.0/16注:httpd,php,DNS服务在此前的博客中有详细说明,这里就不在详细演示,在此前的基础上追加安装,MySQL,NFS一、安装mysql-5.5.33下载mysql-5...
分类:
Web程序 时间:
2014-08-18 01:43:34
阅读次数:
4255
试验简述:分别在host1和host2上安装php和httpd服务器,并部署Discuz站点,在host2上安装DNS服务,用于通过轮询,向客户提供站点bbs.test.com网站的IP地址.在host3上分别提供mysql数据库用于存放站点数据.,部署LFS服务用于向用户提供附件头像等上传的空间.1.在各服务器上分别安装对..
分类:
Web程序 时间:
2014-08-18 01:43:13
阅读次数:
258
写在前面:如果此文有幸被某位朋友看见并发现有错的地方,希望批评指正。如有不明白的地方,愿可一起探讨。总体方案平台规划拓扑图如下:总体解决方案:两台web服务通过DNS实现负载均衡,共享NFS服务器,通过NFS服务器共享MySQL服务器说明:接下来将搭建DNS服务器、两台web服务..
分类:
Web程序 时间:
2014-08-18 01:37:13
阅读次数:
278
??本文讲的分布式文件系统,是通过集群来实现的,因此也是集群文件系统。本文介绍下分布式文件系统中的常见问题及GFS中给出的解决方法。设计要点:性能提高性能的方法就是并行,讲一个任务分解成多个任务,同一时候运行。GFS中的思路是将文件分块,每一个块是一个chunk,每一个chunk单独保存,保存chu...
分类:
其他好文 时间:
2014-08-17 18:22:42
阅读次数:
293
HDFS Architecture
Introduction
HDFS是分布式文件系统,它被设计为运行在普通商用硬件之上。它与已经存在的文件系统有很多相似性。但是,也有巨大的不同。HDFS有很高的容错,被设计为部署在低廉的硬件上。HDFS提供为应用程序的数据提供一个高通量的访问,适合有大量数据的应用程序。HDFS放松了一些POSIX的需求,以使可以用流的方式访问文件系统的数据。HDFS最初作为...
分类:
其他好文 时间:
2014-08-17 17:02:32
阅读次数:
249
本文转载:http://www.cnblogs.com/olartan/archive/2009/12/02/1615131.html第1章 引言数据量巨大时,首先把多表分算到不同的DB中,然后把数据根据关键列,分布到不同的数据库中。库分布以后,系统的查询,io等操作都可以有多个机器组成的群组共同完...
分类:
数据库 时间:
2014-08-17 10:23:02
阅读次数:
319
上一节以WordCount分析了MapReduce的基本执行流程,但并没有从框架上进行分析,这一部分工作在后续慢慢补充。这一节,先剖析一下任务提交过程。MapReduce集群包含一个JobTracker和多个TaskTracker,这里先不考虑YARN,仍然依据1版本进行分析。一个MapReduce...
分类:
其他好文 时间:
2014-08-17 02:20:01
阅读次数:
320
在druid集群环境中 broker节点的作用是查询。它知道metadata 通过zookeeper发送到了集群中的哪个节点,从而能够准确的查询到。broker也把各个节点的结果汇聚到一个节点中。On start up, Realtime nodes announce themselves and ...
分类:
其他好文 时间:
2014-08-17 01:00:31
阅读次数:
257