hive sql alter table 修改表操作小记

ALTER TABLE仅仅会修改表的元数据，但是不会对表数据本身作任何修改

有全量表如下：

create external table test.class_info(class string,student array<string>,user_info map<string, int>,position struct<province:string, city:string, district:string>
)
row format delimited fields terminated by ','
collection items terminated by '_'
map keys terminated by ':'
lines terminated by '\n'
stored as textfile
location '/big-data/test/user_info';

有分区表如下：

create external table test.class_info_partition(class string,student array<string>,user_info map<string, int>,position struct<province:string, city:string, district:string>
)
partitioned by (date_key string)
row format delimited fields terminated by ','
collection items terminated by '_'
map keys terminated by ':'
lines terminated by '\n'
stored as textfile
location '/big-data/test/user_info_partition';

一、表重命名

语法：

ALTER TABLE ods_table_name RENAME TO new_table_name;

实例：

hive> use test;
OK
Time taken: 0.835 seconds
hive> show tables;
OK
class_info
Time taken: 0.112 seconds, Fetched: 1 row(s)
hive> alter table class_info rename to school_class_info;
OK
Time taken: 0.179 seconds
hive> show tables;
OK
school_class_info
Time taken: 0.028 seconds, Fetched: 1 row(s)

二、增加、修改、删除表分区

命令仅可用于分区表，全量表使用报错如下：

hive> ALTER TABLE school_class_info ADD IF NOT EXISTS PARTITION (class = 'Grade-two-of-junior-High-school') LOCATION '/big-data/test/user_info/Grade-two-of-junior-High-school' ;

1、增加表分区

语法：
正常情况下需要分区不存在，如果为了防止分区存在报错可以加 IF NOT EXISTS 关键字

ALTER TABLE table_name ADD [IF NOT EXISTS] PARTITION (分区字段名 = 'XXX') LOCATION '$PATH'

实例：

    > ALTER TABLE class_info_partition ADD IF NOT EXISTS PARTITION (date_key = '2021-01-06') LOCATION '/big-data/test/user_info/2021-01-06' ;
OK
Time taken: 0.74 seconds

结果：

hive> show partitions test.class_info_partition;
OK
date_key=2021-01-06
Time taken: 0.146 seconds, Fetched: 1 row(s)

2、删除表分区

基础数据准备

hive> show partitions test.class_info_partition;
OK
date_key=2021-01-06
Time taken: 0.146 seconds, Fetched: 1 row(s)
hive> ALTER TABLE class_info_partition ADD IF NOT EXISTS PARTITION (date_key = '2021-01-07') LOCATION '/big-data/test/user_info/2021-01-07' ;
OK
Time taken: 0.683 seconds
hive> show partitions test.class_info_partition;
OK
date_key=2021-01-06
date_key=2021-01-07
Time taken: 0.125 seconds, Fetched: 2 row(s)

语法：

ALTER TABLE partition_table_name DROP IF EXISTS PARTITION (分区字段名 = 'XXX');

实例：

ALTER TABLE test.class_info_partition DROP IF EXISTS PARTITION (date_key='2021-01-07');

结果：

hive> ALTER TABLE test.class_info_partition DROP [IF EXISTS] PARTITION (date_key='2021-01-07');
Dropped the partition date_key=2021-01-07
OK
Time taken: 1.106 seconds
hive> show partitions test.class_info_partition;
OK
date_key=2021-01-06
Time taken: 0.121 seconds, Fetched: 1 row(s)

修改表分区

语法：

ALTER TABLE class_info_partition PARTITION (分区字段名 = 'XXX') SET LOCATION '$PATH' ;

实例：

    > show partitions test.class_info_partition;
OK
date_key=2021-01-06
Time taken: 0.115 seconds, Fetched: 1 row(s)
hive> ALTER TABLE class_info_partition PARTITION (date_key = '2021-01-06') SET LOCATION '/big-data/test/user_info/2021-01-07' ;
OK
Time taken: 0.433 seconds

结果：
我们查询date_key = '2021-01-06'数据时发现没有数据，在date_key = '2021-01-07加载数据后数据重新出现。这个命令不会将数据从旧的路径移走，也不会删除旧的数据。

对于内部表即使是使用ALTER TABLE table_name ADD PARTITION语句增加分区，分区内的数据和元数据信息也是会被同时删除，对于外部表分区内的数据不会被删除。

三、增加、修改、删除表字段，修改列名/类型/位置/注释

1、为表添加一个字段或者多个字段

语法：

alter table table_name add columns( 新增字段名 新增字段类型 comment '$新增字段注释');

实例：

# 添加1列
hive> desc school_class_info;
OK
class                   string
student                 array<string>
user_info               map<string,int>
position                struct<province:string,city:string,district:string>
Time taken: 0.079 seconds, Fetched: 4 row(s)
hive> alter table school_class_info add columns(>         user_id bigint comment '用户ID'> );
OK
Time taken: 0.209 seconds
hive> desc school_class_info;
OK
class                   string
student                 array<string>
user_info               map<string,int>
position                struct<province:string,city:string,district:string>
user_id                 bigint                  ??ID
Time taken: 0.056 seconds, Fetched: 5 row(s)# 添加多列
alter table school_class_info add columns(name string comment '用户名称',city string comment '城市',sex string comment '用户性别',age string comment '用户年龄',phone string comment '用户手机',email string comment '用户邮箱',unqiue_id string comment '身份证ID'
);
hive> desc school_class_info;
OK
class                   string
student                 array<string>
user_info               map<string,int>
position                struct<province:string,city:string,district:string>
user_id                 bigint                  ??ID
name                    string                  ????
city                    string                  ??
sex                     string                  ????
age                     string                  ????
phone                   string                  ????
email                   string                  ????
unqiue_id               string                  ???ID
Time taken: 0.06 seconds, Fetched: 12 row(s)

2、删除列/更新列

语法：

alter table table_name replace columns(保留字段1 保留字段类型1 comment '保留字段类型1注释',保留字段2 保留字段类型2 comment '保留字段类型2注释',保留字段3 保留字段类型3 comment '保留字段类型3注释',保留字段4 保留字段类型4 comment '保留字段类型4注释',保留字段5 保留字段类型5 comment '保留字段类型5注释',保留字段6 保留字段类型6 comment '保留字段类型6注释',......
)

实例：

# 由于数据脱敏，我们需要删除unqiue_id列
hive> alter table school_class_info replace columns(>     class string comment '',>     student array<string> comment '',>     user_info map<string,int> comment '',>     position struct<province:string,city:string,district:string> comment '',>     user_id bigint comment '用户ID',>     name string comment '用户名称',>     city string comment '城市',>     sex string comment '用户性别',>     age int comment '用户年龄',>     phone string comment '用户手机',>     email string comment '用户邮箱'> );
OK
Time taken: 0.24 seconds
hive> desc school_class_info;
OK
class                   string
student                 array<string>
user_info               map<string,int>
position                struct<province:string,city:string,district:string>
user_id                 bigint                  ??ID
name                    string                  ????
city                    string                  ??
sex                     string                  ????
age                     string                  ????
phone                   string                  ????
email                   string                  ????
Time taken: 0.057 seconds, Fetched: 11 row(s)
# 相当于使用replace重新将表的列给更新替换了

结果：我们发现unqiue_id字段已经被删除

3、修改列名/类型/位置/注释

语法：

#修改字段名,类型,注释
alter table table_name change [column] 现字段1名 修改后字段1名 修改后段1类型 comment '$修改后注释';
#修改后字段位置
alter table table_name change [column] 现字段1名 修改后字段1名 修改后段1类型 comment '$修改后注释' after 改为在某字段后的某字段名;

实例：

# 将性别(sex)名称改成gender，类型改成int，注释改成“性别”
alter table school_class_info change column sex gender int comment '性别';# 将age字段类型改为int,并将位置移动到name字段后面
alter table school_class_info change age age int comment '用户年龄' after name;

结果测试后报错如下：

hive> alter table school_class_info change column sex gender int comment '性别';
FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. Unable to alter table. The following columns have types incompatible with the existing columns in their respective positions :
gender

更改表中字段的顺序还是建议使用alter table table_name change column

hive sql alter table 修改表操作小记相关推荐

mysql alter table修改表命令整理
这篇文章主要介绍了mysql alter table修改表命令整理的相关资料,需要的朋友可以参考下 MYSQL ALTER TABLE命令用于修改表结构,例如添加/修改/删除字段.索引.主键等等,本文 ...
ALTER TABLE(修改表结构命令)
创建了sqlite表结构后,希望添加表字段,又不能修改原来的代码,所以用alter 修改表结构. 1.添加表字段 alter table 表名 add 字段名类型(值) 示例:alter tabl ...
mysql alter table_mysql alter table 修改表命令详细介绍
MySQL ALTER语法如下: ALTER [IGNORE] TABLE tbl_name alter_spec [, alter_spec ...] alter_specification: AD ...
oracle修改表结构的sql命令是什么,sql语句中修改表结构的命令是什么？
sql语句中修改表结构的命令是:"ALTER TABLE"命令. ALTER TABLE 语句用于在已有的表中添加.删除或修改列. SQL ALTER TABLE 语法如需在表中 ...
SQL ALTER TABLE 语句
SQL ALTER TABLE 语句 ALTER TABLE 语句 ALTER TABLE 语句用于在已有的表中添加.删除或修改列. SQL ALTER TABLE 语法如需在表中添加列,请使用下面 ...
alter table锁表，MySQL出现Waiting for table metadata lock的场景浅析及解决方案
在修改/增加表字段的时候,发现很慢, show processlist; 时, Waiting for table metadata lock 能一直锁很久. 官网的一段话,可以理解下 http:// ...
alter table新增字段操作究竟有何影响？(上篇)
很久以前就有个疑问,见过一些表设计时会留出几个reverse的字段,目的是为了以后扩展,但此时设计的字段类型.长度等都是预计的,未来是否可用,不好说,那为什么会这么做呢?可能的原因是:"我现 ...
mysql alter table 锁表_alter table锁表，MySQL出现Waiting for table metadata lock的场景浅析及解决方案...
在修改/增加表字段的时候,发现很慢, show processlist; 时, Waiting for table metadata lock 能一直锁很久. 官网的一段话,可以理解下 8.10.4. ...
MySQL中修改表结构的关键字_下列SQL语句中,修改表结构的关键字是
[单选题]对<将进酒>全诗分析不正确的是 [单选题]下列划线词语的解释有误的一项是 [多选题]下列食品属于不完全蛋白质的是 ( ) . [单选题]下列聚合函数中属性列必须是数值型的是 [单 ...
oracle 数据库 alter table 修改字段
oracle 数据库 alter table 修改字段 – 更新表名(很少用) alter table tablename RENAME TO newtablename; – 添加字段语法: alte ...