这篇博文分享的是我们针对一个耗时20秒的请求，用Wireshark进行抓包分析的过程。请求的流程是这样的：客户端浏览器 -> SLB(负载均衡) -> ECS(云服务器) -> SLB -> 客户端浏览器。从分析的情况看，SLB与客户端的网络环境都可能引起这个问题。但是从IIS日志来看，有些耗时长的...
分类：
其他好文 时间：
2014-06-19 00:31:12
阅读次数：
779
目的这份文档描写叙述了怎样安装、配置和管理从几个节点到有数千个节点的Hadoop集群。玩的话，你可能想先在单机上安装。(看单节点配置)。准备从Apache镜像上下载一个Hadoop的稳定版本号。安装安装一个Hadoop集群，一般包含分发软件到全部集群中的机器上或者是安装RPMs。一般地，集群中的一台...
分类：
其他好文 时间：
2014-06-19 00:19:50
阅读次数：
372
五、搭建Hadoop集群上面的步骤，确认了单机可以执行Hadoop的伪分布执行，真正的分布式执行无非也就是多几台slave机器而已，配置方面的有一点点区别，配置起来就非常简单了。1、准备三台服务器192.168.56.101192.168.56.102192.168.56.103在每台机器的/etc/hosts中都将ip及hostname给映射上：192.168.56.101 nginx1192...
分类：
其他好文 时间：
2014-06-16 23:18:41
阅读次数：
499
Spark1.0.0可以通过以下几种方式来对Spark应用程序进行监控：
Spark应用程序的WebUI或者Spark Standalone的集群监控指标，然后通过支持指标收集的集群监控系统，如ganglia进行监控辅助监控工具
1：WebUI
Spark应用程序提交后，driver和Executor之间不断的交换运行信息，可以通过driver的4...
分类：
其他好文 时间：
2014-06-16 20:12:51
阅读次数：
325
记录使用RedHatClusterSuite实现高可用集群，利用web服务实验。实现RHCS的集群，有三个前提条件：①每个集群都有惟一集群名称；②至少有一个fence设备；③至少应该有三个节点；两个节点的场景中要使用qdisk（仲裁磁盘）；实验环境介绍：集群主机：192.168.1.6test1；192.168.1...
分类：
Web程序 时间：
2014-06-16 17:54:12
阅读次数：
616
环境说明：[root@dbhtml]#uname-a
Linuxdb2.6.32-358.el6.x86_64#1SMPFriFeb2200:31:26UTC2013x86_64x86_64x86_64GNU/Linux
[root@dbhtml]#cat/etc/redhat-release
CentOSrelease6.4(Final)lvs安装部署：1、查看内核模块是否支持lsmod|grepip_vs#发现没有2、安装wgethttp://www..
分类：
其他好文 时间：
2014-06-16 16:49:23
阅读次数：
326
前言：在很多场景中，服务的不间断及高可用性是非常重要的。不光要有负载均衡机制，虽然它在一定的场景中能实现一定的高可用性。（出门左转有过介绍）当其中的一台RealServer宕机后，客户多刷新几次页面，调度器还是能将请求转到其他的服务器上，不至于彻底挂掉。但是当调度器..
分类：
其他好文 时间：
2014-06-16 16:45:12
阅读次数：
230
一 什么是负载均衡？ 负载均衡将是大型网站解决高负荷访问和大量并发请求采用的终极解决办法。负载均衡技术发展了多年，有很多专业的服务提供商和产品可以选择。二 实现方式 1. URL 重定向 2. 基于 DNS： 在DNS中为多个地址配置同一个名字，因而查询这个名字的客户机将得到其中一个地址...
分类：
其他好文 时间：
2014-06-15 12:41:54
阅读次数：
281
一、项目要求
本文讨论的日志处理方法中的日志，仅指Web日志。其实并没有精确的定义，可能包括但不限于各种前端Web服务器——apache、lighttpd、nginx、tomcat等产生的用户访问日志，以及各种Web应用程序自己输出的日志。
二、需求分析： KPI指标设计
PV(PageView): 页面访问量统计
IP: 页面独立IP的访问量统计
...
分类：
其他好文 时间：
2014-06-15 10:25:49
阅读次数：
395
写了几天，用OSG，实现了集群渲染，感觉还不错，线性加速比还算可以。采用KDTree 、八叉树管理场景，场景数据通过UDP和TCP。
不用拷贝文件，直接在线读取。效率基本满帧。如图：
这个 3*2 的一个投影墙：（渲染节点）...
分类：
其他好文 时间：
2014-06-14 12:14:35
阅读次数：
2302
