这是一种将海量的数据水平扩展的数据库集群系统，数据分表存储在sharding 的各个节点上，使用者通过简单的配置就可以很方便地构建一个分布式MongoDB 集群。MongoDB 的数据分块称为 chunk。每个 chunk 都是 Collection 中一段连续的数据记录，通常最大尺寸是 200.....
分类：
数据库 时间：
2015-01-24 12:59:10
阅读次数：
264
原文:MySQL分区技术针对海量数据的优化主要有两种：
大表拆小表的方式；SQL语句的优化 分区技术：
与水平分割类似，但它是在逻辑层进行的水平分表，对于应用程序而言它还是一张表 一、range方式
1、创建一张分区表 可以到/usr/local/mysql/var/test/下看到生成这么多文件（...
分类：
数据库 时间：
2015-01-24 10:06:21
阅读次数：
154
针对海量数据的优化主要有两种：大表拆小表的方式；SQL语句的优化分区技术：与水平分割类似，但它是在逻辑层进行的水平分表，对于应用程序而言它还是一张表一、range方式1、创建一张分区表可以到/usr/local/mysql/var/test/下看到生成这么多文件（26个）2、创建一张未分区表可以到/...
分类：
数据库 时间：
2015-01-24 07:55:06
阅读次数：
214
1、如何让买家更方便的买到满意的宝贝？ 现在网站的信息量越来越大，可以说是“海量”，这当然是好事，但有时候却会给买家带去“被淹没在信息的海洋中”般的困惑。当然，为了买家能找到满意的宝贝，我们也提供了搜索引擎的功能，不过，我的感觉是这功能有时候并不能满足大家的要求。 淘宝网对买卖双方的需求有两个链接入...
分类：
其他好文 时间：
2015-01-24 00:20:22
阅读次数：
168
关于"Deming第三原则：不要依赖于海量的检查"的思考 传统的想法认为检查可以排除糟糕的质量。当难于确定在过程中一个缺陷在哪边产生的时候，一个好的方法是关注于我们做的如何，而不应针对最终的产品。质量应当是内在的，而不是依赖于无数的检查获得的。 为了使用该原则，一个质量保证组织可以：
1、在整个开发...
分类：
其他好文 时间：
2015-01-24 00:16:49
阅读次数：
267
一、简介HBase是基于列存储、构建在HDFS上的分布式存储系统，其主要功能是存储海量结构化数据。HBase构建在HDFS之上，因此HBase也是通过增加廉价的PC机提高系统运行和存储的能力。HBase中存储的表有如下特点：1、大表：一个表可以有数十亿行，上百万列；2、无模式：每行都有一..
分类：
其他好文 时间：
2015-01-23 11:26:03
阅读次数：
301
这篇文章的内容摘自码农期刊第一期：海量用户积分排名算法探讨。主要讲述了几种处理用户积分排名的算法，希望大家有所收获，谢谢！
问题
某海量用户网站，用户拥有积分，积分可能会在使用过程中随时更新。现在要为该网站设计一种算法，在每次用户登录时显示其当前积分排名。用户最大规模为2亿；积分为非负整数，且小于100万。
PS: 据说这是迅雷的一道面试题，不过问题本身具有很强的真实性，所以本文...
分类：
编程语言 时间：
2015-01-23 00:58:38
阅读次数：
295
FastDFS 安装及使用2012-11-17 13:10:31|分类：Linux|举报|字号订阅Google了一下，流行的开源分布式文件系统有很多，介绍如下：mogileFS：Key-Value型元文件系统，不支持FUSE，应用程序访问它时需要API，主要用在web领域处理海量小图片，效率相比mo...
分类：
其他好文 时间：
2015-01-21 17:53:07
阅读次数：
222
一：起因
（1）最近一直在处理大数据，从MB ----> GB的变化，是一次质的飞跃，相应的工具也在变 从widows到linux，从单机单核 到 hadoop多节点的计算
（2）问题来了，面对海量的数据，如何从中挖掘实用的信息或者发现潜在的现象，可视化工具可能是必不可少的 ；
（3）可视化工具可以说百度一大篇，可是作为研究者的我们，程序猿的我们可能更希望能够抽象出一种数学模型，...
分类：
其他好文 时间：
2015-01-21 13:32:02
阅读次数：
180
MySQL Enterprise Monitor是专门为MySQL数据库而设计的一款企业级监控，能非常好地与MySQL各方面特性相结合，包括：MySQL的关键性能指标、主机、磁盘、备份、新特性相关以及各种场景下的架构配置，并支持从单节点到海量节点部署的环境。它不仅能够全面地监控MySQL的运行状态，还能及时发现潜在的问题并给出优化建议。本文描述了MySQL Enterprise Monitor的安...
分类：
数据库 时间：
2015-01-21 11:38:35
阅读次数：
473
