本文为本人原创，首发到炼数成金http://f.dataguru.cn/thread-138720-1-1.html。情况是这样的，我没有一个非常强劲的电脑来搞出一个性能非常NB的服务器集群，相信很多人也跟我差不多，所以现在把我的低配置集群经验拿出来写一下好了。我的配备：1）五六年前的赛扬单核处理器...
分类：
其他好文 时间：
2014-07-19 20:07:37
阅读次数：
294
上一篇文章写到了灾难恢复中WEB服务器的配置。其实说白了很简单，就是在另一个地方模拟出原始服务器集群的环境。这个文章主要谢谢APP服务器的配置。灾难恢复呢，对于APP服务器来说，无非包括两方面的内容：DB的配置，保证新的服务器也能连接到特定的DB服务器。可以接收到新的WEB服务器的请求。DB的配置呢...
分类：
移动开发 时间：
2014-07-19 19:37:59
阅读次数：
256
我的pc有一个IP地址是可以訪问网络的，那么如何让VM可以共享我的IP地址，也能上网呢。今天在摸索中实现了，详细的配置例如以下： 1，首先将VM的网卡net8启用： 2，然后将VM的网卡设置为VMnet8（NAT）： 3，将PC的能够上网的网卡共享： 要勾上同意其它网络用户通过此计算机的in...
分类：
其他好文 时间：
2014-07-18 20:36:37
阅读次数：
254
是针对单个作业，针对本job再怎么优化也不会影响到其他job；Hadoop的负载主要有两部分：CPU负载和IO负载；问题：机器io开销很大，但是机器的cpu开销较小，另外map输出文件也较大，怎么办？解决办法：通过设置map的中间输出进行压缩就可以了，这个不会影响最终reduce的输出。集群中的机器...
分类：
其他好文 时间：
2014-07-18 20:29:09
阅读次数：
384
前言: 通过对spark集群脚本的研读, 对一些重要的shell脚本技巧, 做下笔记. *). 取当前脚本的目录sbin=`dirname "$0"` sbin=`cd "$sbin"; pwd`代码评注:# 以上代码为获取执行脚本所在的目录的常用技巧# sbin=$(dirname $0) ...
分类：
其他好文 时间：
2014-07-18 19:16:52
阅读次数：
239
前言: spark最近非常的火热, 本文不讲spark原理, 而是研究spark集群搭建和服务的脚本是如何编写的, 管中窥豹, 希望从运行脚本的角度去理解spark集群. 研究的spark为1.0.1版. spark集群采用standalone模式搭建, 其基础架构为master-slave(w.....
分类：
其他好文 时间：
2014-07-17 23:26:44
阅读次数：
345
对于90%以上想学习Spark的人而言，如何构建Spark集群是其最大的难点之一，为了解决大家构建Spark集群的一切困难，家林把Spark集群的构建分为了四个步骤，从零起步，不需要任何前置知识，涵盖操作的每一个细节，构建完整的Spark集群。从零起步，构建Spark集群经典四部曲： 第一步：搭建H...
分类：
其他好文 时间：
2014-07-17 21:35:29
阅读次数：
389
转自http://blog.csdn.net/moshengtan/article/details/8990052
1 Web负载均衡
1.1 - 使用商业硬件实现
最常用的F5 与citrix netscaler。比如12306前端的web好像用的就是F5 的BIGIP。如果公司资金足够的话，相对使用开源软件来说理方便。
优点：维护方便，性能稳定
缺点：费用太高
...
分类：
Web程序 时间：
2014-07-17 19:30:38
阅读次数：
325
一、介绍LVS是LinuxVirtualServer的简写，即Linux虚拟服务器，是一个虚拟的服务器集群系统。该项目由章文嵩博士成立，是中国国内最早出现的自由软件项目之一。使用LVS技术要达到的目标是：通过LVS提供的负载均衡技术和Linux操作系统实现一个高性能、高可用的服务器群集，它具有..
分类：
其他好文 时间：
2014-07-17 16:04:36
阅读次数：
537
1、HRegionServer启动不正常在namenode上执行jps,则可看到hbase启动是否正常，进程如下：[root@master bin]# jps26341 HMaster26642 Jps7840 ResourceManager7524 NameNode7699 SecondaryNa...
分类：
其他好文 时间：
2014-07-17 13:02:12
阅读次数：
268
