前提，安装了jdk1.7，scala，hadoop单节点步骤：spark-env.sh加入：HADOOP_CONF_DIR=/root/------ 表示使用hdfs上的资源，如果需要使用本地资源，请把这一句注销2，slaves3，spark-defalts.conf----------------...
分类：
其他好文 时间：
2015-12-16 19:09:31
阅读次数：
128
随着网站的功能越来越多，用户量越来越庞大，单节点模式已经严重不能支撑整个系统的正常运作，轻则用户页面访问时间越来越慢，重则就会导致整个系统瘫痪。这时候
就需要优化或调整目前的架构，大部分人就会采用各种负载均衡软件例如nginx、hproxy、LVS等，也有的采用分布式的方式把系统根据功能拆分成很多系统，也有的根据地域
和网络不同来实现访问不同节点部署的系统，也有的大型高流量、高负载的系统把负载...
分类：
Web程序 时间：
2015-12-07 22:46:29
阅读次数：
326
在生产环境中一系统因架构变化后，把一模块原有的单节点扩展成了两个节点，前端采用用nginx做负载的架构，而这两个节点需要一个公共的存储来存放用户上传的图片，用户的并发不高，再因原有业务模块是从nginx主机上剥离出来的，在原nginx主机上有“img”这个存储图片的目录，所..
分类：
数据库 时间：
2015-12-04 21:05:22
阅读次数：
638
一、cassandra的安装 cassandra现在的版本比之以前各个方面都有了很大的提升，这里采用的是2.1.11版本，下载地址:http://www.apache.org/dyn/closer.lua/cassandra/2.1.11/apache-cassandra-2.1.11-bin.t....
分类：
其他好文 时间：
2015-11-23 21:45:54
阅读次数：
194
一、Redis集群原理 集群技术是构建高性能网站架构的重要手段，试想在网站承受高并发访问压力的同时，还需要从海量数据中查询出满足条件的数据，并快速响应，我们必然想到的是将数据进行切片，把数据根据某种规则放入多个不同的服务器节点，来降低单节点服务器的压力。 上一篇我们讲到了 Redis 的主从复制技术...
分类：
其他好文 时间：
2015-11-19 23:49:17
阅读次数：
182
在kafka中，我们能创建多种类型的集群，一般如下：单节点——单个broker集群单节点——多broker集群多结点——多broker集群kafka集群中主要有五个组件：Topic：主题主要用于用一个名字标识生产者往kafka发送了什么类型的消息，作为消息归类的标识唯一键。在kafka中，主题被分区...
分类：
其他好文 时间：
2015-10-28 19:11:12
阅读次数：
167
要完整地表示一个图，就需要明确图中有什么，很简单，节点和边。 所以，在用邻接表表示一个图的时候，我们需要分别表示其节点和边，然后用边将节点连接起来即可。 使用邻接表，文字上的描述就是，将所有节点放入一张邻接表中，对于每个节点的邻接节点，用一个链表将其连接起来。1 邻接表中边、节点、图定义 1...
分类：
其他好文 时间：
2015-10-19 16:52:15
阅读次数：
223
本文为《基于Dubbo的分布式系统架构视频教程》的课程系列文档，更多课程信息，请关注：http://www.roncoo.comDubbo视频教程--基础篇--第03节--ZooKeeper注册中心安装详细步骤（单节点）安装Dubbo注册中心(Zookeeper-3.4.6)Dubbo建议使用Zookeeper作为服务的注册中心。注册中心..
分类：
其他好文 时间：
2015-10-16 06:30:47
阅读次数：
335
flume架构图单节点flume配置flume-1.4.0启动flumebin/flume-ngagent--conf./conf-fconf/flume-conf.properties-Dflume.root.logger=DEBUG,console-nagent-n表示配置文件中agent的名字agent.sources=r1
agent.sinks=s1
agent.channels=c1
agent.sources.r1.channels=c1
agent.si..
分类：
Web程序 时间：
2015-10-04 06:47:55
阅读次数：
525
一、单节点安装1、下载解压tar -zxvfzookeeper-3.4.6.tar.gz2、创建配置文件$ZOOKEEPER_HOME/conf/下创建zoo.cfg配置tickTime=2000dataDir=/usr/local/soft/job/zookeeper-3.4.6/datadata...
分类：
其他好文 时间：
2015-09-23 16:57:21
阅读次数：
204
