Hive依据key获取value

比如字段如下,需求在hive中可以获取value

sex=1&hight=180&weight=100&sal=2000000
sex=0&hight=176&weight=101&sal=1000000
sex=1&hight=170&weight=102&sal=2000000
sex=0&hight=169&weight=103&sal=3000000
sex=0&hight=188&weight=104&sal=7000000
sex=1&hight=187&weight=105&sal=9000000

方法1 ,自定义hive函数

基本思路打包成json,利用json工具解析

import org.apache.hadoop.hive.ql.exec.UDF;
import org.codehaus.jettison.json.JSONException;
import org.codehaus.jettison.json.JSONObject;public class Key2Value extends UDF {public String evaluate(String str, String key) throws JSONException {if (str.isEmpty() || key.isEmpty()) {return null;}//转为json格式,借用json工具解析String s1 = str.replace("&", ",");String s2 = s1.replace("=", ":");String s3 = "{" + s2 + "}";JSONObject jsonObject = new JSONObject(s3);return jsonObject.getString(key);}public static void main(String[] args) throws JSONException {Key2Value key2Value = new Key2Value();String str = "sex=1&hight=187&weight=105&sal=9000000";String sal = key2Value.evaluate(str, "sal");System.out.println(sal);//9000000}
}

利用maven打包成jar上传到服务器,之后注册,创建临时名称,调用

hive> add jar /mysoft/test.jar;
Added [/mysoft/test.jar] to class path
Added resources: [/mysoft/test.jar]
hive> create temporary function key2Value as 'Key2Value';
OK
Time taken: 0.019 seconds
hive> select key2Value("sex=1&hight=180&weight=100&sal=2000000","sal");2000000

方法2:借用`parse_url`函数

select parse_url(concat("http://127.0.0.1/:8000/?","sex=1&hight=187&weight=105&sal=9000000"),"QUERY","sal")

结果

注意事项

hive> create temporary function key2Value as 'Key2Value';
FAILED: Class Key2Value does not implement UDF, GenericUDF, or UDAF
FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.FunctionTask

删除jar包后重启hive,再次进行注册

总结:

依据key一区value,可以构建自定义函数或调用parse_url方法,不是url可以先构建url
相比之下,第二种方法好一些,因为维护自定义函数也是比较麻烦的!

Hive依据key获取value相关推荐

php: 通过key获取多维数组中的值
通过多维数组中的key获取value 假设有以下多维数组 $array = ['zero'=>['e'=>'ss', 'f'=>'dd',],'e'=>'111', 'seco ...
【Groovy】map 集合 ( 根据 Key 获取 map 集合中对应的值 | map.Key 方式 | map.‘Key’ 方式 | map[‘Key’] 方式 | 代码示例 )
文章目录一.根据 Key 获取 map 集合中对应的值 1.通过 map.Key 方式获取 map 集合中的值 Value 2.通过 map.'Key' 方式获取 map 集合中的值 Value 3 ...
Consul作为配置中心，配置Asp.Net Core应用程序依据key/value动态更新
Consul作为配置中心,配置Asp.Net Core应用程序依据key/value自动更新 https://github.com/wintoncode/Winton.Extensions.Conf ...
chatgpt API key 获取及延续
目录问题描述 API key 获取 API key 延续注册虚拟卡虚拟卡绑定openAI 账户虚拟卡注销参考链接问题描述 chatgpt目前已被很多人作为辅助工具,使用openai开放的a ...
shell从文件中根据key获取value
# 根据key获取value(适用于key=value格式的数据) # 调用格式 info key <file> function info(){# 获取key所在的行info_line= ...
Java Map中如何使用key获取value数据呢？
转自: Java Map中如何使用key获取value数据呢? 下文笔者讲述使用Map.get()方法获取集合中的value值的方法分享,如下所示: 实现思路:借助Map的get方法即可获取value ...
最新！中国天气网api接口调用，key获取方式，数据请求秘钥获取，城市id获取方法
以前的天气获取方式已经不支持了,虽然能获取到数据,但是获取到的信息已经不对了. 中国天气网提供的最新接口需要数据请求秘钥key.而且有效期只有7天,用完了还要重新购买,很麻烦,但是获取到的内容绝对是最 ...
java获取json中的某个值_接口测试之json中的key获取
在很多情况下我们在进行接口测试的时候都会有获取上个接口返回的json数据中的某个key值,然后下个接口调用这个key值.今天给大家讲解一下针对不同类型的json获取某个key的值. 一.首先是单纯ob ...
Java中list.forEach方法的使用示例-根据key获取对应的value
场景获取了字典表对象的list,每个对象的属性有key和value. 比如对象1的key=1,value=公众号对象2的key=2,value=霸道的程序猿现在已经获取2怎么在这个对象的List ...

Hive依据key获取value

方法1 ,自定义hive函数

方法2:借用`parse_url`函数

注意事项

总结:

Hive依据key获取value相关推荐

最新文章

热门文章

Hive依据key获取value

方法1 ,自定义hive函数

方法2:借用parse_url函数

注意事项

总结:

Hive依据key获取value相关推荐

最新文章

热门文章

方法2:借用`parse_url`函数