java写hive自定义函数_hive自定义函数的实现和执行

1. 先建个maven工程，创建Java类，将你要实现的内容写进类的方法里，

例如public class StringExt extends UDF{

public String evaluate(String pnb){

return "Hello " + pnb;

}

这个类的实现很简单，继承了org.apache.hadoop.hive.ql.exec.UDF类，并覆写了evaluate方法

要注意写上

import org.apache.hadoop.hive.ql.exec.UDF;

同时在pom.xml里引入

org.apache.hive

hive-exec

1.1.0-cdh5.9.0

org.apache.hadoop

hadoop-common

2.6.0-cdh5.9.0

要注意您引入的版本和服务器上的版本必须一致才行

2. 然后实现函数写完了就打包上传到服务器上(我是参考开发上传的路径，放到哪个路径下无所谓)

3. 这时就可以利用新的设置的函数了，我是直接将sql的执行写到文件里了，所以我直接在xxx.sql里写上我的函数

add jar file:///opt/program/xxx/xxx/xxx/xxxx.jar;

create temporary function find as 'Utils.FinalConfirmUDF';(将你创建的类写在这里引入)

SELECT

find(xxxxx)

FROM xxxxx (这个find函数就是我自定义写的)

然后执行hivesql文件

nohup hive -hiveconf date='init' -hivevar where='' -f xxx.sql > xxx.log &ds='${hiveconf:date}

你也可以直接在服务器上用命令行执行上述内容

java写hive自定义函数_hive自定义函数的实现和执行相关推荐

java 根据日期算星座_Hive自定义函数实现通过日期计算星座
虽然Hive已经提供了很多内置的函数,比如count().sum(),但是还是不能满足用户的需求,因此提供了自定义函数供用户自己开发函数来满足自己的需求. 一.自定义函数分类UDF(User-Defi ...
hive中字段长度函数_Hive常用函数总结
hive函数的分类 hive的客户端显示当前会话有多少函数可用 SHOW FUNCTIONS; 如: hive> show functions ; OK ! != % 显示函数的描述信息 DE ...
hive in 字符串_hive常用函数 concat concat_ws row_number
在应用hive在数据仓库中进行数据提取中经常会用户很多函数,为了记录自己常用的hive函数,特写这个系列的文章,记录下自己的使用心得,其中包括使用场景.用法等. 1.concat concat是字符拼 ...
hive当前日期超前_hive日期函数
Hive 中,可以用String.Date和Timestamp表示日期时间,String 用 yyyy-MM-dd 的形式表示,Date 用 yyyy-MM-dd 的形式表示,Timestamp 用 ...
hive 复合类型_hive 常用函数整理 9.复合类型操作
1. map类型构建: map 语法: map (key1, value1, key2, value2, -) 说明:根据输入的key和value对构建map类型举例: hive> Creat ...
分析函数hive计算均值_hive常用函数及优化
常用函数 1.数学函数 round(double a,int d ) 四舍五入 floor(double a)对给定数据进行向下舍入最接近的整数.例如floor(21.8),返回21. ceil(do ...
row number函数_Hive排名函数ROW_NUMBER,RANK 和 DENSE_RANK的区别
需求描述:分析最近三个月每天排名前30的邮箱收件数量. 涉及到的表字段:发件时间,收件人. 一.ROW_NUMBER 表t查询出了3月每天不同类型邮箱收件量的降序排名,表t1通过ROW_NUMBER函 ...
mysql cbrt函数_Hive FUNCTIONS函数
标签: hive> SHOW FUNCTIONS; ! != % & * + - / < <= <=> <> = == > >= ^ ab ...
Hive内置运算函数，自定义函数(UDF)和Transform
4.Hive函数 4.1 内置运算符内容较多,见<Hive官方文档> 4.2 内置函数内容较多,见<Hive官方文档> https://cwiki.apache.org ...

java写hive自定义函数_hive自定义函数的实现和执行

java写hive自定义函数_hive自定义函数的实现和执行相关推荐

最新文章

热门文章