一、Xtrabackup是什么: Xtrabackup是一个对InnoDB做数据备份的工具，支持在线热备份(备份时不影响数据读写)，是商业备份工具InnoDB Hotbackup的一个很好的替代品。 Xtrabackup有两个主要的工具：xtrabackup、innobackupex 二、利用二进制 ...
分类：
数据库 时间：
2016-06-26 22:23:31
阅读次数：
215
apche的commons-io.jar包，里面有个类IOUtils，提供的下列方法： readLines方法能够从字节输入流或字符输入流里读取数据，按行读，返回字符串组成的list write方法能把字节组、字符组、字符、字符串、StringBuffer写入到字节或字符输出流里 contenteq ...
分类：
其他好文 时间：
2016-06-23 20:39:06
阅读次数：
157
1、HBase概述
HBase是hadoop生态系统中的重要组成部分，是一个开源的、面向列、适合存储海量非结构化数据或半结构化数据，具备高可靠性、高性能、可灵活扩展伸缩、支持实时数据读写的分布式存储系统
存储在Hbase中的表的特征
1、大：一个表可以有上亿行，上百万列
2、任意模式：每行都有一个可排序的主键和任意多的列，列可以根据需要动态的增加，同一张表中的不同的行，它们...
分类：
其他好文 时间：
2016-06-22 00:29:23
阅读次数：
123
1、HBase概述 HBase是hadoop生态系统中的重要组成部分，是一个开源的、面向列、适合存储海量非结构化数据或半结构化数据，具备高可靠性、高性能、可灵活扩展伸缩、支持实时数据读写的分布式存储系统 存储在Hbase中的表的特征 1、大：一个表可以有上亿行，上百万列 2、任意模式：每行都有一个可 ...
分类：
其他好文 时间：
2016-06-21 12:35:55
阅读次数：
137
1、输入流、输出流 2、字节流、字符流 3、节点流、处理流 字节流：InputStream OutputStream 字节流：小数据读写；字符流：大文件读写； 处理流 ...
分类：
编程语言 时间：
2016-06-19 01:14:57
阅读次数：
242
在系统早期，数据量还小的时候不会引起太大的问题，但是随着数据量持续增多，后续迟早会出现一台机器硬件瓶颈问题的。而mongodb主打的就是海量数据架构，他不能解决海量数据怎么行！不行！“分片”就用这个来解决这个问题。 传统数据库怎么做海量数据读写？其实一句话概括：分而治之。上图看看就清楚了，如下 ta ...
分类：
数据库 时间：
2016-05-26 14:28:28
阅读次数：
257
博客园不能转载，直接参见原文啦 http://www.cnblogs.com/huxiao-tee/p/4660352.html?utm_source=tuicool&utm_medium=referral 摘要： 在真正的把用户数据读写到磁盘或者是存储设备前，内核还会在page cache中管理这 ...
分类：
其他好文 时间：
2016-05-21 19:00:11
阅读次数：
377
1. BlockManager的注册和初始化
2. BlockManager里面的重要函数详细介绍
一：BlockManager初始化
1. BlockManager的实例对象调用initializes的时候才能正常工作。
启动initializes方法又两个作用：BlockTransferService(网络通信)，ShuffleClient/**
* Initializ...
分类：
其他好文 时间：
2016-05-18 19:01:18
阅读次数：
198
以简洁易懂的漫画形式讲解HDFS存储机制与运行原理。 一、角色出演 如上图所示，HDFS存储相关角色与功能如下： Client：客户端，系统使用者，调用HDFS API操作文件;与NN交互获取文件元数据;与DN交互进行数据读写。 Namenode：元数据节点，是系统唯一的管理者。负责元数据的管理;与 ...
分类：
其他好文 时间：
2016-05-16 14:13:59
阅读次数：
199
根据Maneesh Varshney的漫画改编，以简洁易懂的漫画形式讲解HDFS存储机制与运行原理。 一、角色出演 如上图所示，HDFS存储相关角色与功能如下： Client：客户端，系统使用者，调用HDFS API操作文件;与NN交互获取文件元数据;与DN交互进行数据读写。 Namenode：元数 ...
分类：
其他好文 时间：
2016-05-16 10:53:01
阅读次数：
129
