上一篇文章写到了灾难恢复中WEB服务器的配置。其实说白了很简单，就是在另一个地方模拟出原始服务器集群的环境。这个文章主要谢谢APP服务器的配置。灾难恢复呢，对于APP服务器来说，无非包括两方面的内容：DB的配置，保证新的服务器也能连接到特定的DB服务器。可以接收到新的WEB服务器的请求。DB的配置呢...
分类：
移动开发 时间：
2014-07-19 19:37:59
阅读次数：
256
一、互联网应用的分类。讨论前端架构之前，首先要弄清楚互联网应用的类型，明确了自己的产品所属的类型才能打造属于自己的架构。对互联网产品进行分类，网上有很多不同的观点。我觉得分类是多维度的，但是按照交互以及功能的复杂程度来分类是比较客观的。因此，我比较认同淘宝玉伯在关于前后端开发模式中对应用的分类，以下...
分类：
其他好文 时间：
2014-07-19 00:04:39
阅读次数：
421
是针对单个作业，针对本job再怎么优化也不会影响到其他job；Hadoop的负载主要有两部分：CPU负载和IO负载；问题：机器io开销很大，但是机器的cpu开销较小，另外map输出文件也较大，怎么办？解决办法：通过设置map的中间输出进行压缩就可以了，这个不会影响最终reduce的输出。集群中的机器...
分类：
其他好文 时间：
2014-07-18 20:29:09
阅读次数：
384
前言: 通过对spark集群脚本的研读, 对一些重要的shell脚本技巧, 做下笔记. *). 取当前脚本的目录sbin=`dirname "$0"` sbin=`cd "$sbin"; pwd`代码评注:# 以上代码为获取执行脚本所在的目录的常用技巧# sbin=$(dirname $0) ...
分类：
其他好文 时间：
2014-07-18 19:16:52
阅读次数：
239
前言: spark最近非常的火热, 本文不讲spark原理, 而是研究spark集群搭建和服务的脚本是如何编写的, 管中窥豹, 希望从运行脚本的角度去理解spark集群. 研究的spark为1.0.1版. spark集群采用standalone模式搭建, 其基础架构为master-slave(w.....
分类：
其他好文 时间：
2014-07-17 23:26:44
阅读次数：
345
对于90%以上想学习Spark的人而言，如何构建Spark集群是其最大的难点之一，为了解决大家构建Spark集群的一切困难，家林把Spark集群的构建分为了四个步骤，从零起步，不需要任何前置知识，涵盖操作的每一个细节，构建完整的Spark集群。从零起步，构建Spark集群经典四部曲： 第一步：搭建H...
分类：
其他好文 时间：
2014-07-17 21:35:29
阅读次数：
389
cluster集群要实现vmotion、DRS、HA等功能，EXSI主机必须是两台或以上的数量。那怎么判断vmotion等漂移功能在哪些主机执行的呢？这就引出了集群cluster的概念。所有基于vmotion的功能都是在集群内的EXSI主机实现的，VM只会在集群内做漂移。所有EXSI主机加入集群后，CPU、内存等..
分类：
其他好文 时间：
2014-07-17 20:31:28
阅读次数：
278
cluster集群要实现vmotion、DRS、HA等功能，EXSI主机必须是两台或以上的数量。那怎么判断vmotion等漂移功能在哪些主机执行的呢？这就引出了集群cluster的概念。所有基于vmotion的功能都是在集群内的EXSI主机实现的，VM只会在集群内做漂移。所有EXSI主机加入集群后，CPU、内存等..
分类：
其他好文 时间：
2014-07-17 20:20:52
阅读次数：
194
一、介绍LVS是LinuxVirtualServer的简写，即Linux虚拟服务器，是一个虚拟的服务器集群系统。该项目由章文嵩博士成立，是中国国内最早出现的自由软件项目之一。使用LVS技术要达到的目标是：通过LVS提供的负载均衡技术和Linux操作系统实现一个高性能、高可用的服务器群集，它具有..
分类：
其他好文 时间：
2014-07-17 16:04:36
阅读次数：
537
1、HRegionServer启动不正常在namenode上执行jps,则可看到hbase启动是否正常，进程如下：[root@master bin]# jps26341 HMaster26642 Jps7840 ResourceManager7524 NameNode7699 SecondaryNa...
分类：
其他好文 时间：
2014-07-17 13:02:12
阅读次数：
268
