第一种（推荐使用）：import org.apache.hadoop.hive.ql.exec.UDF;import java.util.Calendar;public class GetAge extends UDF { public String evaluate(String sfzjh){ ...
分类：
编程语言 时间：
2019-09-10 16:20:06
阅读次数：
797
某些场景下，我们在写UDF实现业务逻辑时候，可能需要去读取某个配置文件。 大多时候我们都会将此文件上传个hdfs某个路径下，然后通过hdfs api读取该文件，但是需要注意： UDF中读取文件部分最好放在静态代码块中（只会在类加载时候读取一次），尤其在处理的数据量比较大的时候，否则会反反复复的读取， ...
分类：
其他好文 时间：
2019-09-05 18:33:01
阅读次数：
212
信安之路 第04周 前言 这周自主研究的任务如下： 附录解释： 1. SQLi的时候应对各种限制，可以使用数据库自带的系统函数来进行一系列变换绕过验证 eg：字符串转换函数、截取字符串长度函数等 2. 注入的时候需要利用数据库来执行系统命令，不同数据库采用不同方式 eg：MySQL的 、SQLSer ...
分类：
其他好文 时间：
2019-08-25 16:27:07
阅读次数：
146
需求 （filter）： 现在有这么一个需求，统计出现在纽约的行车记录。这里我们需要进行一个过滤的操作，我们需要有个自定义的 UDF ，具体思路是，表里面有经度和维度这两个字段，通过这个可以来开发一个是否在纽约的 UDF。 ...
分类：
其他好文 时间：
2019-08-20 10:29:11
阅读次数：
94
昨天进行测试一个网站，进行udf提权时候，没办法导出.dll， 起初以为是这个马的问题，后来用专用马，一样不行，但是有报错了，有上网找了半天，终于被我找到了。 Mysql数据库从文件导入或导出到文件，提示: The MySQL server is running with the --secure- ...
分类：
其他好文 时间：
2019-08-18 11:23:18
阅读次数：
157
Spark 版本 2.3 文中测试数据（json） 用户自定义udf 自定义udf的方式有两种 1. SQLContext.udf.register() 2. 创建UserDefinedFunction 这两种个方式 使用范围不一样 package com.test.spark import org ...
分类：
其他好文 时间：
2019-07-23 00:41:12
阅读次数：
138
UDF： 一、编写udf类，在其中定义udf函数 二、在主方法中进行调用 运行结果： 可以看到，以上代码中一共定义了三个不同的udf函数，分别对三个函数进行说明： len(str: String)：该函数使用用来获取传入字段的长度，str 即为所需要传入的字段 在使用的时候，需要现将其进行注册并赋予 ...
分类：
其他好文 时间：
2019-07-21 01:03:31
阅读次数：
93
sql处理百万级以上的数据提高查询速度的方法 sql处理百万级以上的数据提高查询速度的方法 sql处理百万级以上的数据提高查询速度的方法 sql处理百万级以上的数据提高查询速度的方法 处理百万级以上的数据提高查询速度的方法： 1.应尽量避免在 where 子句中使用!=或<>操作符，否则将引擎放弃使 ...
分类：
数据库 时间：
2019-07-06 13:15:01
阅读次数：
116
1.安装UDF函数 （1）下载GBK2Unicode.zip，地址为https://downloads.teradata.com/tag/udf （2）windows或者Linux环境下使用bteq进行安装。 进入文件所在目录，输入如下命令（windows中使用dos） 输入口令后，输入如下命令 验 ...
分类：
其他好文 时间：
2019-07-02 19:41:00
阅读次数：
201
