原文链接：http://www.cnblogs.com/juddhu/archive/2012/03/07/2383101.html Oracle 中 decode 函数用法 含义解释：decode(条件,值1,返回值1,值2,返回值2,...值n,返回值n,缺省值) 该函数的含义如下：IF 条件= ...
分类：
数据库 时间：
2017-04-11 14:08:08
阅读次数：
205
优化时，把hive sql当做map reduce程序来读，会有意想不到的惊喜。 理解hadoop的核心能力，是hive优化的根本。这是这一年来，项目组所有成员宝贵的经验总结。 长期观察hadoop处理数据的过程，有几个显著的特征: 1.不怕数据多，就怕数据倾斜。 2．对jobs数比较多的作业运行效 ...
分类：
其他好文 时间：
2016-12-25 23:17:49
阅读次数：
235
读一张表，对其进行二值化特征转换。可以二值化要求输入类型必须double类型，类型怎么转换呢？ 直接利用spark column 就可以进行转换： DataFrame dataset = hive.sql("select age,sex,race from hive_race_sex_bucktiz ...
分类：
其他好文 时间：
2016-12-20 18:07:40
阅读次数：
536
Hive 是基于Hadoop 构建的一套数据仓库分析系统，它提供了丰富的SQL查询方式来分析存储在Hadoop 分布式文件系统中的数据，可以将结构 化的数据文件映射为一张数据库表，并提供完整的SQL查询功能，可以将SQL语句转换为MapReduce任务进行运行，通过自己的SQL 去查询分析需 要的内 ...
分类：
数据库 时间：
2016-11-24 06:38:33
阅读次数：
250
Hive字符串分割函数 split(str, regex) - Splits str around occurances that match regexTime taken: 0.769 seconds, Fetched: 1 row(s) 返回值为一个数组 a.基本用法： 例1： split(' ...
分类：
数据库 时间：
2016-11-23 23:37:03
阅读次数：
273
一、HIVE概览小结 二、HIVE安装 三、HIVE基础 四、HIVE SQL 五、HIVE 自定义函数 ...
分类：
其他好文 时间：
2016-09-22 15:49:20
阅读次数：
171
在spark的空表test上进行运算，注意结果差异： ...
分类：
数据库 时间：
2016-08-15 13:01:40
阅读次数：
995
转自：http://www.open-open.com/lib/view/open1400644430159.html Hive跟Impala貌似都是公司或者研究所常用的系统，前者更稳定点，实现方式是MapReduce,因为用Hue的时候，在groupby中文的时候，出现了点问题，并且看到写很长的S ...
分类：
数据库 时间：
2016-08-08 22:30:02
阅读次数：
308
Hive ive优化 要点：优化时，把hive sql当做map reduce程序来读，会有意想不到的惊喜。
理解hadoop的核心能力，是hive优化的根本。 长期观察hadoop处理数据的过程，有几个显著的特征:
1.不怕数据多，就怕数据倾斜。
2．对jobs数比较多的作业运行效率相对比较低，比如即使有几百行的表，如果多次关联多次汇总，产生十几个jobs，没半小时是跑不完的。...
分类：
其他好文 时间：
2016-06-13 06:38:34
阅读次数：
297
test.sh文件代码如下： 使用方法： 其中 -- 是 hive sql 中的注释符号. ...
分类：
数据库 时间：
2016-05-24 19:13:24
阅读次数：
399
