hive查询lzo数据格式文件的表时,抛 Caused by: java.io.IOException: Compressed length 842086665 exceeds max block size 67108864 (probably corrupt file) 这类异常,如图: 这是由于 ...
分类：
编程语言 时间：
2018-10-30 12:07:00
阅读次数：
642
一：压缩（cpmpression）好处 压缩的好处，减少存储文件所需的空间，并且加速数据在网络与磁盘上的传输。 二：压缩格式总结 Hadoop支持DEFLATE、Gzip、bzip2三种压缩格式，还有LZO,LZ4,Snappy压缩，但是需要自己去官网下载相应的包 压缩格式的压缩性能比较，通过笔者在 ...
分类：
其他好文 时间：
2018-09-06 02:59:46
阅读次数：
291
注意：yum安装的无效，需要手动下载源码安装。 ...
分类：
其他好文 时间：
2018-07-07 20:21:24
阅读次数：
222
首先，可以参考JS版本的百度地图API示例。 由于在ionic程序中，我们一般使用的ES5 或 ES6 或者是Typescript。 这与JS 还有有一些区别的。所以，在我们的程序中，代码与官方示例代码格式上不完全相同。 下面，简单说明一下如何在 ionic 程序中 调用 百度地图API. 1. 在 ...
docker 容器互联,及Docker Compose 实现负载均衡
分类：
其他好文 时间：
2018-06-21 11:44:16
阅读次数：
205
使用Linux时，经常希望有些命令结果不在前台显示，如sh脚本，耗时的命令等。一般情况下，使用 & 将命令结果后台运行，如sh test.sh，脚本后台执行。 有时候命令已经在前台执行了，需要将其切换到后台可以使用， ctrl+z ，但是该命令切换到后台会处于暂停状态，可以配合 jobs 进一步处理 ...
分类：
系统相关 时间：
2018-06-18 23:21:04
阅读次数：
272
zkCli 是 zookeeper 原生的与 zk服务群连接的客户端的程序。1. 使用zkCli.sh连接server sh zkCli.sh -timeout 2000 -server 10.202.4.22:2181 退出zkCli客户端：quit 2. zkCli 下的增删查改指令 与 配额 ...
分类：
其他好文 时间：
2018-05-29 01:54:39
阅读次数：
242
1. 参考说明参考文档： http://sqoop.apache.org/ http://sqoop.apache.org/docs/1.99.7/admin/Installation.html 2. 安装环境说明2.1. 环境说明 CentOS7.4+ Hadoop2.7.5的伪分布式环境 主机名... ...
分类：
其他好文 时间：
2018-05-24 10:27:05
阅读次数：
399
备注： 此文是佐须之男"跟着佐大学OpenWrt开发"入门培训班教学视频演讲稿提纲，虽是内部资料但再三考虑后对外公布，通过公众的监督来鞭策自己。如对完整内容感兴趣，可以参加"跟着佐大学OpenWrt开发"入门培训班：http://forgotfun.org/2018/04/openwrt-train ...
分类：
其他好文 时间：
2018-05-19 14:41:46
阅读次数：
172
HiveServer2 https://cwiki.apache.org/confluence/display/Hive/HiveServer2+Overview2 https://cwiki.apache.org/confluence/display/Hive/HiveServer2+Client ...
分类：
其他好文 时间：
2018-05-13 10:40:23
阅读次数：
181
