这篇博文分享的是我们针对一个耗时20秒的请求，用Wireshark进行抓包分析的过程。请求的流程是这样的：客户端浏览器 -> SLB(负载均衡) -> ECS(云服务器) -> SLB -> 客户端浏览器。从分析的情况看，SLB与客户端的网络环境都可能引起这个问题。但是从IIS日志来看，有些耗时长的...
分类：
其他好文 时间：
2014-06-19 00:31:12
阅读次数：
779
目的这份文档描写叙述了怎样安装、配置和管理从几个节点到有数千个节点的Hadoop集群。玩的话，你可能想先在单机上安装。(看单节点配置)。准备从Apache镜像上下载一个Hadoop的稳定版本号。安装安装一个Hadoop集群，一般包含分发软件到全部集群中的机器上或者是安装RPMs。一般地，集群中的一台...
分类：
其他好文 时间：
2014-06-19 00:19:50
阅读次数：
372
五、搭建Hadoop集群上面的步骤，确认了单机可以执行Hadoop的伪分布执行，真正的分布式执行无非也就是多几台slave机器而已，配置方面的有一点点区别，配置起来就非常简单了。1、准备三台服务器192.168.56.101192.168.56.102192.168.56.103在每台机器的/etc/hosts中都将ip及hostname给映射上：192.168.56.101 nginx1192...
分类：
其他好文 时间：
2014-06-16 23:18:41
阅读次数：
499
Spark1.0.0可以通过以下几种方式来对Spark应用程序进行监控：
Spark应用程序的WebUI或者Spark Standalone的集群监控指标，然后通过支持指标收集的集群监控系统，如ganglia进行监控辅助监控工具
1：WebUI
Spark应用程序提交后，driver和Executor之间不断的交换运行信息，可以通过driver的4...
分类：
其他好文 时间：
2014-06-16 20:12:51
阅读次数：
325
记录使用RedHatClusterSuite实现高可用集群，利用web服务实验。实现RHCS的集群，有三个前提条件：①每个集群都有惟一集群名称；②至少有一个fence设备；③至少应该有三个节点；两个节点的场景中要使用qdisk（仲裁磁盘）；实验环境介绍：集群主机：192.168.1.6test1；192.168.1...
分类：
Web程序 时间：
2014-06-16 17:54:12
阅读次数：
616
一 什么是负载均衡？ 负载均衡将是大型网站解决高负荷访问和大量并发请求采用的终极解决办法。负载均衡技术发展了多年，有很多专业的服务提供商和产品可以选择。二 实现方式 1. URL 重定向 2. 基于 DNS： 在DNS中为多个地址配置同一个名字，因而查询这个名字的客户机将得到其中一个地址...
分类：
其他好文 时间：
2014-06-15 12:41:54
阅读次数：
281
一、项目要求
本文讨论的日志处理方法中的日志，仅指Web日志。其实并没有精确的定义，可能包括但不限于各种前端Web服务器——apache、lighttpd、nginx、tomcat等产生的用户访问日志，以及各种Web应用程序自己输出的日志。
二、需求分析： KPI指标设计
PV(PageView): 页面访问量统计
IP: 页面独立IP的访问量统计
...
分类：
其他好文 时间：
2014-06-15 10:25:49
阅读次数：
395
如何使用Zookeeper 作为一个分布式的服务框架，主要用来解决分布式集群中应用系统的一致性问题，它能提供基于类似于文件系统的目录节点树方式的数据存储，但是 Zookeeper 并不是用来专门存储数据的，它的作用主要是用来维护和监控你存储的数据的状态变化。通过监控这些数据状态的变化，从而可以达到基...
分类：
编程语言 时间：
2014-06-14 22:05:43
阅读次数：
487
写了几天，用OSG，实现了集群渲染，感觉还不错，线性加速比还算可以。采用KDTree 、八叉树管理场景，场景数据通过UDP和TCP。
不用拷贝文件，直接在线读取。效率基本满帧。如图：
这个 3*2 的一个投影墙：（渲染节点）...
分类：
其他好文 时间：
2014-06-14 12:14:35
阅读次数：
2302
关于Nginx+tomcat+memcached（缓存）配置集群负载均衡的下载与安装流程：
实现的整体步骤
一：安装memcached。（memcached可以一个或者多个）
二：安装两个tomcat
三：配置msm。
四：安装nginx，实现负载均衡。
以下是详细步骤：
第一步：安装memcached
1. 下载memcached服务...
分类：
其他好文 时间：
2014-06-14 11:14:00
阅读次数：
229
