1 Lustre概述Lustre是面向集群的存储架构，它是基于Linux平台的开源集群（并行）文件系统，提供与POSIX兼容的文件系统接口。Lustre两个最大特征是高扩展性和高性能，能够支持数万客户端系统、PB级存储容量、数百GB的聚合I/O吞吐量。Lustre是Scale-Out存储架构，借助强...
分类：
其他好文 时间：
2014-06-29 00:39:13
阅读次数：
253
本文分析了Spark1.0.0的Client，Master和Worker之间是如何通信的。通过对通信的分析，可以清楚的理解各个角色的作用和责任，和它在集群中扮演的不同角色。
当然了，为了便于源码分析，本文开始分析了akka，一个非常优秀的actor的实现：高性能，易于编程，可扩展和弹性无中心。...
分类：
其他好文 时间：
2014-06-18 06:59:54
阅读次数：
183
HBase在大数据领域的应用越来越广泛，成为目前NoSQL数据库中表现最耀眼，呼声最高的产品之一，但就应对复杂条件的查询来说，一般认为它并不是非常适合，熟悉HBase的开发人员对此应该有一定的体会，但是基于普遍的需求，开发者们希望HBase在保持高性能优势的同时能对复杂条件的查询给予一定的支持，而本文将要介绍的正是一种在HBase现行机制下以非侵入式实现的基于二级多列索引的高性能复杂条件查询引擎。...
分类：
其他好文 时间：
2014-06-18 06:29:49
阅读次数：
224
??
本文讲的分布式文件系统，是通过集群来实现的，因此也是集群文件系统。本文介绍下分布式文件系统中的常见问题及GFS中给出的解决方法。
设计要点:
性能
提高性能的方法就是并行，讲一个任务分解成多个任务，同时执行。
GFS中的思路是将文件分块,每个块是一个chunk,每个chunk单独保存，保存chunk的节点叫chunkserver。对文件的读写，可以转成对chun...
分类：
其他好文 时间：
2014-06-17 23:00:34
阅读次数：
268
首先来了解一个这个对象: XMLHttpRequest对象可以在不向服务器提交整个页面的情况下，实现局部更新网页。当页面全部加载完毕后，客户端通过该对象向服务器请求数据，服务器端接受数据并处理后，向客户端反馈数据。 XMLHttpRequest 对象提供了对 HTTP 协议的完全的访问，包括做出 POST 和 HEAD 请求以及普通的 GET 请求的能力。XMLHttpRequest 可以同步或异步返回 Web 服务器的响应，并且能以文本或者一个 DOM 文档形式返回内容。尽管名为 XMLHttpReque...
分类：
其他好文 时间：
2014-06-17 22:09:58
阅读次数：
303
from:http://yang.u85.us/memcache_redis_mongodb.pdf从以下几个维度，对 redis、memcache、mongoDB 做了对比。1、性能都比较高，性能对我们来说应该都不是瓶颈。总体来讲，TPS 方面 redis 和 memcache 差不多，要大于 m...
分类：
数据库 时间：
2014-06-17 20:22:01
阅读次数：
305
之前有次把图片存储在数据库，结果读取时候报错了：Out of Memory..图片本来不应该存储在数据库中的，消耗内存太大，既然已经这样，那就先解决问题，不改存储方式。如果一个应用程序为了提高性能而把数据加载内存中而占用较大的内存，比如超过了默认的最大值128MB，需要加大java虚拟机可使用的最大...
分类：
其他好文 时间：
2014-06-17 20:07:35
阅读次数：
232
高性能高并发
高并发访问的核心原则其实就一句话“把所有的用户访问请求都尽量往前推”。
如果把来访用户比作来犯的"敌人"，我们一定要把他们挡在800里地以外，即不能让他们的请求一下打到我们的指挥部（指挥部就是数据库及分布式存储）。
如：能缓存在用户电脑本地的，就不要让他去访问CDN。能缓存CDN服务器上的，就不要让CDN去访问源（静态服务器）了。能访问静态服务器的，就不要去访问动态服务器。...
分类：
Web程序 时间：
2014-06-17 19:17:46
阅读次数：
221
innodb_buffer_pool_size80%(系统缓存池)innodb_log_file_size4G(mysql5.5中限定的最大数值，redo日志增大提高性能，redo日志小崩溃后恢复更快)\\开始将这个值设置为512M可以拥有1G的的redo日志，会使得拥有充裕的写操作空间max_connections151（默认值，需要修改）innodb_file..
分类：
数据库 时间：
2014-06-17 17:53:28
阅读次数：
289
模块化开发的好处： 1：减少冲突 2：提高性能用sea.js为例：sea.js模块库下载地址：http://seajs.org/docs/#downloads例子：获取非行间样式的模块化开发： 无标题文档获取非行间样式模块文件getStyle.js:// JavaScript Docu...
分类：
Web程序 时间：
2014-06-17 13:56:39
阅读次数：
247
