码迷,mamicode.com
首页 >  
搜索关键字:snappy    ( 97个结果
HBase修改压缩格式及Snappy压缩实测分享
HBase修改压缩格式及Snappy压缩实测分享 ...
分类:移动开发   时间:2016-06-14 11:54:00    阅读次数:178
大数据服务脚本化管理
HBASE echo "create 'TEST', {NAME => 'cf1', VERSIONS => '3', COMPRESSION => 'SNAPPY'}, {NAME => 'cf2', VERSIONS => '3', COMPRESSION => 'SNAPPY'}, SPLIT ...
分类:其他好文   时间:2016-06-06 20:32:39    阅读次数:391
HBase中的压缩算法比较 GZIP、LZO、Zippy、Snappy [转]
网址: http://www.cnblogs.com/panfeng412/archive/2012/12/24/applications-scenario-summary-of-compression-algorithms.html GZIP、LZO、Zippy/Snappy是常用的几种压缩算法, ...
分类:移动开发   时间:2016-05-11 18:14:15    阅读次数:229
Twemproxy+SSDB ~ 搞起
一、ssdbhttp://ssdb.io/zh_cn/安装wget--no-check-certificatehttps://github.com/ideawu/ssdb/archive/master.zipunzipmastercdssdb-mastermake 安装中遇到故障 问题解决 如果出现如下错误: g++...deps/snappy-1.1.0/.libs/libsnappy.a:Nosuchfileordirectory make[1]:**..
分类:数据库   时间:2016-04-26 16:09:56    阅读次数:576
详解Kafka生产者Producer配置
基本配置metadata.broker.list:broker服务器集群列表,格式为host1:port1,host2:port2...producer.type:消息发送类型同步还是异步,默认为同步compression.codec:消息的压缩格式,默认为none不压缩,也可以为gzip,snappy,lz4serializer.class:消息加密格式,默认为kafka.se..
分类:其他好文   时间:2016-04-26 16:07:47    阅读次数:146
Hadoop安装lzo实验
参考http://blog.csdn.net/lalaguozhe/article/details/10912527 环境:hadoop2.3cdh5.0.2 hive 1.2.1 目标:安装lzo 测试作业运行与hive表创建使用lzo格式存储 之前安装试用snappy的时候,发现cdh解压后的n...
分类:其他好文   时间:2016-01-23 10:20:16    阅读次数:196
一次bug死磕经历之Hbase堆内存小导致regionserver频繁挂掉
环境如下: Centos6.5 Apache Hadoop2.7.1 Apache Hbase0.98.12 Apache Zookeeper3.4.6 JDK1.7 Ant1.9.5 Maven3.0.5 最近在测Hbase的压缩,Hadoop安装了lzo和snappy,插入50条文本数据,每条数...
分类:其他好文   时间:2016-01-06 11:34:55    阅读次数:131
在Spark程序中使用压缩
当大片连续区域进行数据存储并且存储区域中数据重复性高的状况下,数据适合进行压缩。数组或者对象序列化后的数据块可以考虑压缩。所以序列化后的数据可以压缩,使数据紧缩,减少空间开销。1. Spark对压缩方式的选择 压缩采用了两种算法:Snappy和LZF,底层分别采用了两个第三方库实现,同时可以自...
分类:其他好文   时间:2015-11-03 22:35:36    阅读次数:1582
Swift项目引入第三方库的方法
以下,将创建一个Swift项目,然后引入3个库: Snappy 简化autolayout代码的库 Alamofire HTTP网络库,AFNetworking作者写的 SDWebImage 图片加载,objc项目,通过头文件bridge方式供swift使用 其中,前两个是Swift的库,SDWebI...
分类:编程语言   时间:2015-09-27 08:46:58    阅读次数:259
最笨的方法解决 使用Snappy 压缩方式报错“java.lang.UnsatisfiedLinkError: no snappyjava in java.library.path”
之前写过一篇这个文章:http://blog.csdn.net/stark_summer/article/details/47361603,那个时候 linux环境 spark 使用snappy方式压缩任然不好用,而今天我同事hive on hadoop 使用snappy压缩方式也报这个错,此刻的我,感觉这个问题 一定要解决 我想了想,只能使用最笨的方式先解决这个问题了,将libsnappyja...
分类:移动开发   时间:2015-08-31 17:20:25    阅读次数:467
97条   上一页 1 ... 6 7 8 9 10 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!