码迷,mamicode.com
首页 >  
搜索关键字:udf    ( 414个结果
Spark(Hive) SQL中UDF的使用(Python)
相对于使用MapReduce或者Spark Application的方式进行数据分析,使用Hive SQL或Spark SQL能为我们省去不少的代码工作量,而Hive SQL或Spark SQL本身内置的各类UDF也为我们的数据处理提供了不少便利的工具,当这些内置的UDF不能满足于我们的需要时,Hi...
分类:数据库   时间:2015-11-02 20:49:04    阅读次数:368
Adding New Functions to MySQL(User-Defined Function Interface UDF、Native Function)
Adding New Functions to MySQL(User-Defined Function Interface UDF、Native Function)
分类:数据库   时间:2015-10-27 21:35:03    阅读次数:35746
HiveServer2 的jdbc方式创建udf的修改(add jar 最好不要使用),否则会造成一场 java.sql.SQLException: Error while processing statement: null
自从Hive0.13.0开始,使用HiveServer2 的jdbc方式创建udf的临时函数的方法由:ADD JAR ${HiveUDFJarPath} create TEMPORARY function md5 as 'com.hugedata.hive.udf.codec.UDFMd5';改为....
分类:数据库   时间:2015-10-23 21:18:12    阅读次数:809
用java创建UDF,并用于Hive
典型代码如下:导入UDF类:import org.apache.hadoop.hive.ql.exec.UDF;public class UpperCassUDF extends UDF{ public String evaluate(String input){ if(input==nul...
分类:编程语言   时间:2015-10-17 13:32:34    阅读次数:281
Apche pig计算数据 导入Hbase
1.pig将数据导入或加载到hbase使用HBaseStorage UDF函数,地址:http://pig.apache.org/docs/r0.11.0/func.html#HBaseStorage ? ?在shell中案例: ? ? ?pig -Dpig.additional.jars=/home/pps_recommend/pig-0...
分类:其他好文   时间:2015-10-10 17:25:18    阅读次数:260
HIVE使用基础
查看所有表:showtables;查看表结构:desc表名查看表的分区:showpartitions表名;查看UDF:HIVE允许用户使用UDF(userdefinedfunction)对数据进行处理。查看所有UDF:showfunctions某个具体UDF说明:describefunctionUDF名http://blog.csdn.net/yfkiss/article/details/788526..
分类:其他好文   时间:2015-10-09 15:28:57    阅读次数:180
hive的udf制剂
1.配置环境1.介绍jar包裹:hive-exec-0.8.0.jar 和 hadoop-core-0.20.2.jar2.书写udf性能1.extends UDF2.又一次定义UDF的evaluate函数。package com.qunar.hiveudf;import java.text.Sim...
分类:其他好文   时间:2015-09-13 13:09:55    阅读次数:136
db2使用Java存储过程实现MD5函数
1.数据库版本2.Java脚本import java.security.MessageDigest;import COM.ibm.db2.app.UDF;public class MD5UDF extends UDF { public static String MD5(String ...
分类:数据库   时间:2015-09-09 21:28:03    阅读次数:540
Hive自定义函数UDF示例
简单自定义函数只需继承UDF类,然后重构evaluate函数即可LowerCase.java:package com.example.hiveudf; import org.apache.hadoop.hive.ql.exec.UDF; public final class LowerCase ex...
分类:其他好文   时间:2015-08-29 11:03:08    阅读次数:239
HIVE的UDF
0.要继承org.apache.hadoop.hive.ql.exec.UDF类实现evaluate自定义函数调用过程:1.添加jar包(在hive命令行里面执行)hive> add jar /root/NUDF.jar;2.创建临时函数hive> create temporary function...
分类:其他好文   时间:2015-08-25 19:13:55    阅读次数:115
414条   上一页 1 ... 30 31 32 33 34 ... 42 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!