第一阶段：熟练的掌握Scala语言Spark框架是采用Scala语言编写的，精致而优雅。要想成为Spark高手，你就必须阅读Spark的源代码，就必须掌握Scala,；虽然说现在的Spark可以采用多语言Java、Python等进行应用程序开发，但是最快速的和支持最好的开发API依然并将永远是Sca...
分类：
其他好文 时间：
2014-09-24 11:07:36
阅读次数：
305
Nginx+Tomcat负载均衡配置2014-07-28 11:37 吴光科 51CTO 字号：T | T一键收藏，随时查看，分享好友！Nginx+tomcat是目前主流的java web架构，如何让nginx+tomcat同时工作呢，也可以说如何使用nginx来反向代理tomcat后端均衡呢？下面...
分类：
其他好文 时间：
2014-09-24 11:04:46
阅读次数：
247
网站持久代引发Full GC问题分析现状：Dragoon（监控系统）的日报显示trade_us_wholelsale（美国wholesale集群），日均Young GC次数25w次左右，应用暂停295w毫秒（相当于40多分钟），Full GC次数600次左右，应用暂停190w毫秒（相当于30多分钟）...
分类：
其他好文 时间：
2014-09-23 22:59:45
阅读次数：
1898
一、故障症状最近公司一个集群跑大任务时，datanode日志报DataXceiveServer: Exiting due to:java.lang.OutOfMemoryError: unable to create new native thread异常，然后计算节点上的DataNode直接挂掉。...
分类：
其他好文 时间：
2014-09-23 21:51:05
阅读次数：
300
前序：因在widow下用Eclipse联调hadoop2.2.0运行程序没有成功，网上暂时解决办法不多，就折中了下，连接hadoop1.0.3伪分布式
一。用到的环境和工具
1.Eclipse采用的是indio版本，这个可以用官网下载
2.Eclipse hadoop插件：hadoop-eclipse-plugin-1.0.3.jar,
下载地址：http://download.c...
开发的应用采用F5负载均衡交换机，F5将请求转发给5台hp unix服务器，每台服务器有多个webserver实例，对外提供web服务和socket等接口服务。之初，曾有个小小的疑问为何不采用开源的apache、Nginx软件负载，F5设备...
分类：
其他好文 时间：
2014-09-23 18:57:45
阅读次数：
381
Tomcat本文Apache+Tomcat集群配置基于最新的Apache和Tomcat，具体是2011年4月20日最新的Tomcat和Apache集群和负载均衡配置。准备环境ApacheApache是http服务器，我们利用其对Tomcat进行负载均衡。目前最新版本为2.2.17，下载地址为http://httpd.apache.org/download.cgi#apache..
分类：
其他好文 时间：
2014-09-23 18:16:55
阅读次数：
508
1.下载配置必要的文件
2.下载nginx：http://nginx.org/download/nginx-1.6.2.zip
3.下载tomcat：http://mirror.bit.edu.cn/apache/tomcat/tomcat-8/v8.0.12/bin/apache-tomcat-8.0.12-windows-x64.zip
4.解压下载文件
解压nginx-1.6.2.z...
云数据库：架构在云端数据库集群上，通过云服务的方式让关系型数据库的可靠性更高，免去繁琐的维护工作，节约硬件成本，其具备以下特点：云数据库特点：1：管理方便：可以自动备份、弹性扩展。2：性能出色：针对数据库高性能需求，采用高端高性能硬件配置，同时对数据库性能参数做了特定的优化。3：配置简单：轻轻松松1...
分类：
数据库 时间：
2014-09-23 16:05:34
阅读次数：
238
优化需要注意的点
除非必要,一开始不要优化(尤其是开发阶段)
有些优化准则已经过时,需要考虑当下的软硬件环境(不要墨守成规)
不要过分强调某些系统级指标,如cache 命中率,而应该聚焦性能瓶颈点
不盲从，测试、找到系统的性能瓶颈，再确定优化手段
注意权衡优化的成本和收益（有些优化可能需要现有架构做出调整、增加开发/运维成本）
优化的目标是用户体验、降低硬件成本（降低集群规模、不依赖单...
分类：
其他好文 时间：
2014-09-23 15:33:24
阅读次数：
152
