一.Hive介绍 Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供简单SQL查询功能，SQL语句转换为MapReduce任务进行运行。 优点是可以通过类SQL语句快速实现简单的MapReduce统计，不必开发专门的MapReduce应用，十分适合数据仓库 ...
分类：
其他好文 时间：
2018-11-05 00:13:24
阅读次数：
219
题目链接： http://codeforces.com/gym/101194/attachments https://icpcarchive.ecs.baylor.edu/index.php?option=com_onlinejudge&Itemid=8&page=show_problem&prob ...
分类：
其他好文 时间：
2018-11-04 23:01:15
阅读次数：
239
进入https://github.com/docker/compose/releases 查看最新版本，当前版本为1.23.1 设置权限 查看是否安装成功 ...
分类：
系统相关 时间：
2018-11-04 19:24:33
阅读次数：
373
不去修改程序文件，用标签和正则直接在内容页模板里直接输出上一篇下一篇的链接和标题和没有上一篇下一篇的提示文字 ...
分类：
移动开发 时间：
2018-11-04 19:16:34
阅读次数：
176
hbase的客户端代码并不想hive一样用java编写,shell调用，而是使用ruby编写。 在admin.rb文件中方法create，其中接受两个参数，其中第二个参数类型为变长参数。 而在create方法的最后，调用了admin.createTable,其中的admin是hbaes.rb初始化时 ...
分类：
Web程序 时间：
2018-11-04 11:11:05
阅读次数：
232
hbase的客户端代码并不想hive一样用java编写,shell调用，而是使用ruby编写。 在admin.rb文件中方法create，其中接受两个参数，其中第二个参数类型为变长参数。 而在create方法的最后，调用了admin.createTable,其中的admin是hbaes.rb初始化时 ...
分类：
其他好文 时间：
2018-11-04 00:45:22
阅读次数：
177
hive.optimize.cp=true：列裁剪hive.optimize.prunner：分区裁剪hive.limit.optimize.enable=true：优化LIMIT n语句hive.limit.row.max.size=1000000：hive.limit.optimize.limi ...
分类：
其他好文 时间：
2018-11-03 19:14:20
阅读次数：
150
在模型里增加个字段，然后在添加文章的时候，在字段里填了栏目`id`进去在前台的内容页，调用这个字段栏目的多个文章出来 ...
分类：
其他好文 时间：
2018-11-03 17:40:16
阅读次数：
158
1 框架一览 事件处理的架构图如下所示。 2 优化总结 当我们第一次部署整个方案时，kafka和flume组件都执行得非常好，但是spark streaming应用需要花费4-8分钟来处理单个batch。这个延迟的原因有两点，一是我们使用DataFrame来强化数据，而强化数据需要从hive中读取大 ...
分类：
其他好文 时间：
2018-11-02 23:29:29
阅读次数：
241
