编写Apache Hive用户自定义函数（UDF）有两个不同的接口，一个非常简单，另一个...就相对复杂点。 编写Apache Hive用户自定义函数（UDF）有两个不同的接口，一个非常简单，另一个...就相对复杂点。 如果你的函数读和返回都是基础数据类型（Hadoop&Hive 基本writabl ...
分类：
其他好文 时间：
2016-10-10 23:40:52
阅读次数：
387
本博文的主要内容是： 1. Hive本质解析 2. Hive安装实战 3. 使用Hive操作搜索引擎数据实战 SparkSQL前身是Shark，Shark强烈依赖于Hive。Spark原来没有做SQL多维度数据查询工具，后来开发了Shark，Shark依赖于Hive的解释引擎，部分在Spark中运行 ...
分类：
其他好文 时间：
2016-10-09 20:08:46
阅读次数：
325
#!/usr/bin/pythonimport syssys.path.append('/home/zhoujie/Downloads/hive-0.7.0-cdh3u0/lib/py')from hive_service import ThriftHivefrom hive_service.tty ...
分类：
编程语言 时间：
2016-10-09 17:03:09
阅读次数：
259
前言: hive本身提供了丰富的函数集, 有普通函数(求平方sqrt), 聚合函数(求和sum), 以及表生成函数(explode, json_tuple)等等. 但不是所有的业务需求都能涉及和覆盖到, 因此hive提供了自定义函数的接口, 方便用户扩展. 自己好像很久没接触hadoop了, 也很久 ...
分类：
其他好文 时间：
2016-10-08 20:05:37
阅读次数：
140
jdbc远程连接hiveserver2 2016-04-26 15:59 本站整理 浏览(425) 在之前的学习和实践Hive中，使用的都是CLI或者hive –e的方式，该方式仅允许使用HiveQL执行查询、更新等操作，并且该方式比较笨拙单一。幸好Hive提供了轻客户端的实现，通过HiveServ ...
分类：
编程语言 时间：
2016-10-08 19:38:25
阅读次数：
2180
想计算每次抽奖时间之间的间隔 以便判断是否是并发插入 我的方法如下使用一个临时变量记录前一次的抽奖时间 有没更方便的方法实现这一功能呢？对所有用户都求相邻记录时间差该如何操作？ hive做法如下： 1.Hive row_number() 函数的高级用法 row_num 按照某个字段分区显示第几条数据 ...
分类：
其他好文 时间：
2016-10-04 16:13:47
阅读次数：
1703
参考资料：Hadoop2.3.0详细安装过程开源中国git： https://git.oschina.net/lucky110100/sloth.git 你没看错，这就是2.4.0版本的安装脚本，虽然参考的是2.3.0的。 安装环境：虚拟机软件： VirtualBox-4.3.8-92456-Win ...
分类：
其他好文 时间：
2016-09-29 11:20:18
阅读次数：
229
TRUNCATE:truncate用于删除所有的行，这个行为在hive元存储删除数据是不可逆的delect:用于删除特定行条件,你可以从给定表中删除所有的行insert overwrite table table_name select * from table_name where 1=0; ...
分类：
其他好文 时间：
2016-09-28 15:42:29
阅读次数：
105
一、关系运算： 1. 等值比较: = 语法：A=B 操作类型：所有基本类型 描述: 如果表达式A与表达式B相等，则为TRUE；否则为FALSE 举例： hive> select 1 from lxw_dual where 1=1; 1 2. 不等值比较: <> 语法: A <> B 操作类型: 所有 ...
分类：
其他好文 时间：
2016-09-27 14:56:42
阅读次数：
282
Hive数据操作 1.向管理表中装载数据 1.向管理表中装载数据 hive没有行级别数据插入、数据更新和删除操作。 采用“大量”的数据装载操作，或者通过其它方式仅仅将文件写入到正确目录下。 LOAD DATA LOCAL INPATH '${env:HOME}/california-employee ...
分类：
其他好文 时间：
2016-09-27 14:44:40
阅读次数：
247
