tar工具的使用 打包: 简介:在linux上面熟练掌握tar工具之后就能搞定linux上绝大多数压缩文件包,tar虽然只是一个打包工具,但它同时实现了对7z,gzip,xz,bzip2等压缩工具的支持。这鞋压缩工具本身只能对文件或...
分类:
系统相关 时间:
2015-02-03 17:35:47
阅读次数:
228
一、文档压缩: 1、gzip压缩方式: 2、bzip2压缩方式 二、打包 ?最简单的使用tar的方式如下: ????????? 压??? 缩:tar -jcv -f filename.tar.bz2? 要被压缩的文档或目录 ????????查?? ...
分类:
系统相关 时间:
2015-01-30 16:19:49
阅读次数:
186
创建或解压tar.xz文件的方法习惯了 tar czvf 或 tar xzvf 的人可能碰到 tar.xz也会想用单一命令搞定解压或压缩。其实不行 tar里面没有征对xz格式的参数比如 z是针对 gzip,j是针对 bzip2。创建tar.xz文件:只要先 tar cvf xxx.tar xxx/ ...
分类:
其他好文 时间:
2015-01-26 16:30:20
阅读次数:
118
Hive文件格式
1、 TextFile
默认文件格式
数据不做压缩,磁盘开销大,数据解析开销大,可以结合Gzip、Bzip2使用(系统自动检测,执行查询时自动解压)
数据不会被Hive切分,所以无法对数据进行并行操作
创建命令:
2、 SequenceFile
是Hadoop API提供的一种二进制文件支持
使用方便、可分割、可压缩的特点
支持三种压缩方式...
分类:
其他好文 时间:
2015-01-24 15:53:06
阅读次数:
183
压缩 压缩格式:gz、bz2、xz、zip、Z等等。 压缩算法:算法不同,压缩比也不同。 comperss:FILENAME.Z压缩比低。 uncompress gzip; FILENAME.gz 只能压缩文件。 #gzip[OPTION]FILENAME压缩完成后会删除源文件。 [OPTION] -d解压文件,等同于gunzip。 -NUM压缩比。..
分类:
系统相关 时间:
2015-01-21 11:53:49
阅读次数:
341
安装django前要先安装setuptools先安装一些必要的包,否则会报错:Python build finished, but the necessary bits to build these modules were not found#yum install -y sqlite bzip2...
分类:
其他好文 时间:
2015-01-19 12:18:21
阅读次数:
214
▲linux常见的压缩文件的后缀
*.Zcompress程序压缩的文件
*.bz2bzip2程序压缩的文件
*.gzgzip程序压缩的文件
*.tartar程序打包的数据,没有压缩
*.tar.gz或tgztar程序打包并经过gzip压缩的文件
*.tar.bz2tar程序打包并经过bzip2压缩的...
分类:
系统相关 时间:
2015-01-17 15:10:48
阅读次数:
176
1、安装Python的依赖包
yum groupinstall "Development tools"
yum install zlib-devel bzip2-devel openssl-devel ncurses-devel sqlite-devel readline-devel tk-devel gdbm-devel db4-devel libpcap-devel xz-devel
2、...
分类:
编程语言 时间:
2015-01-16 16:49:04
阅读次数:
294
我们的Hadoop生产环境有两个版本,其中一个是1.0.3,为了支持日志压缩和split,我们添加了hadoop-1.2中关于Bzip2压缩的feature. 一切运行良好。
为了满足公司对迭代计算的需求(复杂HiveSQL,广告推荐算法,机器学习 etc), 我们构建了自己的Spark集群,最初是Standalone Mode,版本spark-0.9.1,支持Shark。
上线后,问题接踵而...
分类:
编程语言 时间:
2015-01-14 11:10:35
阅读次数:
403
1、解压1、*.tar 用 tar –xvf 解压2、*.gz 用 gzip -d或者gunzip 解压3、*.tar.gz和*.tgz 用 tar –xzf 解压4、*.bz2 用 bzip2 -d或者用bunzip2 解压5、*.tar.bz2用tar –xjf 解压6、*.Z 用 uncomp...
分类:
系统相关 时间:
2015-01-06 11:42:19
阅读次数:
174