Hive - 增删改 Hive 表字段

一.引言

使用 Hive 表时由于数据的变换经常需要调整 Hive 表字段结构，这里记录一下常用方法。先创建一个测试表 tmp_change_column，包含两个字段 a，b 和分区标识 dt :

function createTable() {
hive -e "
create table if not exists tmp_change_column (
a string,
b string
)
PARTITIONED BY(dt string)
row format delimited fields terminated by '\t'
"
}
createTable

二.增加字段

1.末尾增加字段

在原始列名 a，b 基础上增加字段 c

# 增加一列
hive -e "alter table tmp_change_column add columns (c string comment '增加一列');"

2.增加到指定位置

添加新字段到指定位置需要两步，首先将字段添加至末尾，其次通过 change 方法修改其顺序，这里首先将 b_extend 添加至字段末尾，随后 change b_extend after b，则达到指定位置目的

# 增加一列
hive -e "alter table tmp_change_column add columns (b_extend string comment '指定位置');"
# 调整位置
hive -e "alter table tmp_change_column change b_extend b_extend string after b;"

三.删除字段

1.删除末尾字段

删除字段的原理是替代，用新的字段名替代原有的字段，舍弃掉最后的字段 c

# 删除一列
hive -e "alter table tmp_change_column REPLACE COLUMNS (
a string,
b string,
b_extend string);"

2.删除指定字段

其实和删除末尾字段一致，只需替换 REPLACE COLUMNS 内字段即可，现在删除字段 b

# 删除指定列
hive -e "alter table tmp_change_column REPLACE COLUMNS (
a string,
b_extend string);"

四.修改字段

1.修改字段名称

将字段 b_extend 改为字段 b

# 修改列名
hive -e "alter table tmp_change_column change b_extend b string;"

2.修改字段类型

常用的类型有 STRING，BOOLEAN，INT，FLOAT，DOUBLE，CHAR 等，把字段 b 的类型修改为 Double

# 修改类型
hive -e "alter table tmp_change_column change b b DOUBLE;"

3.修改字段注释

除了名称和类型，注释也可以相对应修改

# 修改注释
hive -e "alter table tmp_change_column change b b DOUBLE comment '修改注释';"

4.同时修改名称，类型，注释

上述操作也可以合并，一次性修改字段的多个属性

# 全部修改
hive -e "alter table tmp_change_column change b b_change STRING comment '再次修改注释'"

五.总结

Hive 表字段的相关操作大致就这些，有一点需要注意，增加字段后，Hive 表当前对应的 Location 地址并不会自动补上该数据，但此时已经可以 select 从表中获取该字段，会全部获得 Null，后续可以通过 select 操作补齐该数据，或者用新的地址 location 补齐该字段。