昨天工作中遇到这样一个场景，有个项目需要把某台服务器下所有的表和索引都启用数据压缩（data_compression=page），已经启用了的表和索引就不需要再压缩一次了。统计一下后发现要运行的REBUILD INDEX代码多达上万条，而整个服务器上的所有需要压缩的数据库对象大小加起来估计接近1TB...
分类：
数据库 时间：
2015-06-25 17:20:41
阅读次数：
161
数据压缩是对存储和性能优势的加强。减少数据库占用的磁盘空间量将减少整体数据文件存储空间，在一下几个方面增加吞吐量： 1.更好的I/O利用率，每个页面可以读写更多的数据。 2.更好的内存利用率，缓冲区可以缓存更多的数据。 3.减少页面的闭锁，每个页面可以包含更多数据。由于数据压缩必须考虑I/O和CPU...
分类：
数据库 时间：
2015-06-25 01:17:03
阅读次数：
247
无损压缩是 指使用压缩后的数据进行重构(或者叫做还原，解压缩)，重构后的数据与原来的数据完全相同；无损压缩用于要求重构的信号与原始信号完全一致的场合。一个很 常见的例子是磁盘文件的压缩。根据目前的技术水平，无损压缩算法一般可以把普通文件的数据压缩到原来的1/2～1/4。一些常用的无损压缩算法有...
分类：
其他好文 时间：
2015-06-24 18:00:10
阅读次数：
276
1.1.基本概念：1.2.多媒体系统:1.3.多媒体数据压缩与编码:(1).熵编码:不考虑数据源的无损数据压缩技术。其核 心思想是按照符号出现的概率大小给符号分配长度 合适的代码,对常用的符号给它分配长度较短(即位 数较少)的代码,对不常用的符号给它分 配长度较长 (即位数较多)的代码。最常见的熵....
分类：
其他好文 时间：
2015-06-24 14:38:13
阅读次数：
143
对于行存储的表和索引，使用数据压缩功能可帮助减小数据库的大小。 除了节省空间之外，数据压缩还可以帮助提高 I/O 密集型工作负荷的性能，因为数据存储在更少的页中，查询需要从磁盘读取的页更少。 但是，在与应用程序交换数据时，在数据库服务器上需要额外的 CPU 资源来压缩和解压缩数据。1，在表的stor...
分类：
其他好文 时间：
2015-06-15 18:14:19
阅读次数：
111
题目链接：http://acm.swust.edu.cn/problem/715/Time limit(ms): 1000 Memory limit(kb): 65535在数据加密和数据压缩中常需要对特殊的字符串进行编码。给定的字母表A 由26 个小写英文字母组成A={a,b,…,z}。该...
分类：
其他好文 时间：
2015-06-09 21:25:12
阅读次数：
412
倒排列表压缩算法目前有很多种倒排列表算法可以选择，但是我们对评判算法的优劣需要定量指标。一般会考虑3个指标：压缩率、压缩速度以及解压速度。压缩率是指数据压缩前和压缩后大小的比例，显然，压缩率越高，就越节约磁盘空间。而压缩速度是压缩单位量的数据所花的时间，但是压缩往往是在建立索引过程中进行的，这是一个...
分类：
编程语言 时间：
2015-06-06 22:04:25
阅读次数：
172
常见数据压缩算法压缩文件压缩主要有两个好处，一是减少了存储文件所占空间，另一个就是为数据传输提速。在hadoop大数据的背景下，这两点尤为重要，那么我现在就先来了解下hadoop中的文件压缩。hadoop里支持很多种压缩格式，我们看一个表格：
LZO和LZ4算法已经不在Hadoop1.x中使用了。1、DEFLATE是同时使用了LZ77与哈夫曼编码的一个无损数据压缩算法，
源代码可以在zlib...
分类：
编程语言 时间：
2015-06-05 21:17:42
阅读次数：
354
zlib(http://zlib.net/)提供了简洁高效的In-Memory数据压缩和解压缩系列API函数，很多应用都会用到这个库，其中compress和uncompress函数是最基本也是最常用的。不过很奇怪的是，compress和uncompress函数尽管已经非常的简单，却仍然有不少人用得不...
分类：
其他好文 时间：
2015-06-05 00:28:30
阅读次数：
153
1992年，美国佐治亚州的WEB Technology公司，宣布做出了重大的技术突破。该公司的DataFiles/16软件，号称可以将任意大于64KB的文件，压缩为原始大小的16分之一。业界议论纷纷，如果消息属实，无异于压缩技术的革命。许多专家还没有看到软件，就断言这是不可能的。因为根据压缩原理，你...
分类：
其他好文 时间：
2015-05-27 20:57:14
阅读次数：
129
