这一节学习树状图的制作。树状图的制作和集群图完全相同，经过这两种 layout 转换后的数据也很相似。...
分类：
Web程序 时间：
2014-08-14 20:46:39
阅读次数：
303
Kafka 跨集群同步方案——Kafka内置的MirrorMaker工具该方案解决Kafka跨集群同步、创建Kafka集群镜像等相关问题，主要使用Kafka内置的MirrorMaker工具实现。Kafka镜像即已有Kafka集群的副本。下图展示如何使用MirrorMaker工具创建从源Kafka集群...
分类：
其他好文 时间：
2014-08-14 20:00:59
阅读次数：
283
一、集群启动过程--启动Master$SPARK_HOME/sbin/start-master.shstart-master.sh脚本关键内容：spark-daemon.sh start org.apache.spark.deploy.master.Master 1 --ip $SPARK_MAST...
分类：
其他好文 时间：
2014-08-14 19:36:09
阅读次数：
387
Flume是Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统，Flume支持在日志系统中定制各类数据发送方，用于收集数据；同时，Flume提供对数据进行简单处理，并写到各种数据接受方（可定制）的能力。
这里我主要讲述我测试flume failover（容错）和load balance（负载均衡）的几个场景以及注意的点。...
分类：
其他好文 时间：
2014-08-14 16:48:08
阅读次数：
578
HDFS
HDFS是一个具有高度容错性的分布式文件系统，适合部署在廉价的机器上，它具有以下几个特点：
1）适合存储非常大的文件
2）适合流式数据读取，即适合“只写一次，读多次”的数据处理模式
3）适合部署在廉价的机器上
但HDFS不适合以下场景（任何东西都要分两面看，只有适合自己业务的技术才是真正的好技术）：
1）不适合存储大量的小文件，因为受Namenode内...
分类：
其他好文 时间：
2014-08-14 16:46:28
阅读次数：
260
转自:http://blog.csdn.net/shaunfang/article/details/9091491 Azure为网站、云服务和虚拟机都提供了免费的负载均衡能力。关于负载均衡我们需要注意的一点就是它对Session的处理。一般来说，传统的负载均衡器有一种叫session粘滞(stick...
分类：
Web程序 时间：
2014-08-14 15:56:38
阅读次数：
194
安装sshHadoop是采用ssh进行通信的，此时我们要设置密码为空，即不需要密码登陆，这样免去每次通信时都输入秘密，安装如下：输入“Y”进行安装并等待自动安装完成。安装ssh完成后启动服务以下命令验证服务是否正常启动：可以看到ssh正常启动；设置免密码登录，生成私钥和公钥：在/root/.ssh中...
分类：
其他好文 时间：
2014-08-14 13:50:18
阅读次数：
879
YslowYahoo发布的一款基于FireFox的插件,主要是为了提高网页性能而设计的，下面是它提倡了23条规则，还是很不错的，分享一下：1.减少HTTP请求次数合并图片、CSS、JS，改进首次访问用户等待时间。2. 使用CDN就近缓存==>智能路由==>负载均衡==>WSA全站动态加速3. 避免空...
分类：
其他好文 时间：
2014-08-14 10:41:08
阅读次数：
181
遇到的问题对于Web程序，使用一台服务器的时候，客户端上传的文件一般也都是存储在这台服务器上。但在集群环境中就行不通了，如果每个服务器都存储自己接受到的文件，就乱套了，数据库中明明有这个附件的记录，却找不到这个文件。于是，文件需要进行统一集中管理，并向集群中的服务器提供统一的路径。基于NFS的分布式...
分类：
Web程序 时间：
2014-08-14 10:28:48
阅读次数：
461
给出具体实例之前：先说说我们为什么选择Azure SQL:Azure SQL 具有哪些优点了：1.自主管理 省去了日常管理本地SQL Server实例的时间成本。2.高可用性 如果一台硬件出故障，SQL Azure提供的自动执行故障转移可以确保应用程序的可用性。3.可扩展性横向扩展,分割了数据，服务...
分类：
数据库 时间：
2014-08-14 01:25:37
阅读次数：
490
