maxcompute 2.0复杂数据类型之struct
1. 含义
类似于Java中的类的概念。包含很多类的属性。
2. 场景
什么样的数据,适合使用struct类型来存储呢?这里列举了几个我在开发中实际用到的场景。
2.1 多个具有相同前缀的字段
其实struct完全可以拆成多个字段。但是对于比较宽的表而言,会有如下特征:
(1)字段数很多,几百个甚至更多;
(2)相近含义的字段,会放到相邻的位置或者使用相同的前缀,以便查找;
对于这种字段,可以考虑放到一个struct里,减少表的字段数,更加方便查找。但是数据字典的维护,依然是比较麻烦的问题。
2.2 对象列表
对象有多种固定的属性,简单的key-value格式无法满足,可以使用array嵌套struct的方式定义。减少了维护数据字典的工作量。
3. 玩转struct
3.1 构造struct
3.1.1 struct
SELECT STRUCT(4,'赵六','男') AS c;
c |
---|
{"col1":4,"col2":"赵六","col3":"男"} |
在没有指定struct内具体字段名的时候,默认为col1、col2、col3、……。所以取值的时候也是这样取,如下:
SELECT STRUCT(4,'赵六','男').col3 AS c;
c |
---|
男 |
3.1.2 named_struct
SELECT NAMED_STRUCT('id',3,'name','王五','gender','男') AS c;
c |
---|
{"id":3,"name":"王五","gender":"男"} |
指定了struct内具体字段名,则named_struct的参数数量必须为偶数,分别是key1、value1、key2、value2、key3、value3、……。所以取值的时候也是这样取,如下:
SELECT NAMED_STRUCT('id',3,'name','王五','gender','男').gender AS c;
c |
---|
男 |
3.2 横纵双向展开struct数组
例如现在有这样一张表:
c |
---|
[{id:1, name:张三, gender:男}, {id:3, name:王五, gender:男}, {id:2, name:李四, gender:男}] |
现在想横向、纵向都展开,成多行多列格式,那么就这样做:
SELECT INLINE(c) FROM `test_table`;
id | name | gender |
---|---|---|
1 | 张三 | 男 |
3 | 王五 | 男 |
2 | 李四 | 男 |
但是这种做法自由度太低,所以很少会使用到。
4. 常见用法
- struct这种类型,更多的是应用在数据存储上。不像array、map还会出现在复杂SQL的中间过程,用于做行列转换等操作。
- struct作为表结构中的字段,可以单独使用,或者是跟array联用,来存储数量不固定的对象数据。在创建表的时候,需要指定好struct内部的字段名、字段类型。
- struct大概是三个复杂类型之中,出场率最低的一个。绝大部分人都只接触过array和map,而几乎没使用过struct。
maxcompute 2.0复杂数据类型之struct相关推荐
- maxcompute 2.0复杂数据类型之array
2019独角兽企业重金招聘Python工程师标准>>> 1. 含义 类似于Java中的array.有序.可重复. 2. 场景 什么样的数据,适合使用array类型来存储呢?这里列举了 ...
- Python-3.7.0常用数据类型源码—列表
Python-3.7.0常用数据类型源码-列表 list源码: /* List object implementation */#include "Python.h" #inclu ...
- MaxCompute 2.0—从ODPS到MaxCompute
从ODPS到MaxCompute-阿里大数据的进化之路是一个商用大数据系统发展史,一个商业大数据系统要解决的问题有可靠性,高性能,安全性等等六个方面.内部产品名ODPS的MaxCompute,是阿里巴 ...
- 如何申请试用MaxCompute 2.0
MaxCompute 2.0 上线以来很多同学都在询问如何才能获取试用资格.在这里向大家简要介绍MaxCompute 2.0发布的功能,申请方式及如何使用. 大数据计算服务(MaxCompute) 快 ...
- 【Java常识】10.0 基本数据类型的自动装箱、拆箱、正则表达式
1.0 基本数据类型有专门的包,这算是很常识了.但是有个小知识点,就是涉及自动装箱拆箱. 代码演示如下: package edp.com.learn1;public class Demo {publi ...
- MySQL 8.0 JSON数据类型与MyBatis结合使用
前言 MYSQL 8.0 JSON数据类型基础应用 1.表 CREATE TABLE `tk_test_json` (`id` varchar(100) CHARACTER SET utf8mb3 C ...
- Hive 0.13 数据类型
hive支持的数据类型路下 数值类型 Numeric Types TINYINT (1字节,数据范围: -128 to 127) SMALLINT (2字节,数据范围: -32,768 to 32,7 ...
- hive复合数据类型之struct
概述 STRUCT:STRUCT可以包含不同数据类型的元素.这些元素可以通过"点语法"的方式来得到所需要的元素,比如user是一个STRUCT类型,那么可以通过user.addre ...
- 数据类型:Struct 和 Union区别
参考:Struct 和 Union区别_firefly_2002的专栏-CSDN博客_union和struct的区别 Struct 和 Union有下列区别: 1.在存储多个成员信息时,编译器会自动给 ...
最新文章
- Corn Fields(POJ 3254状压dp)
- BCH再迎升级,真正比特币即将归来!
- 《jacascript高级程序设计》笔记:数组方法高级
- python 正则表达式 re.search
- 想理解Java的IO,不要从操作系统开始说起的都是耍流氓...
- 前端趋势榜:上周最有意思、又实用的 10 大 Web 项目 - 210924
- spyder matlab,将pycharm配置为matlab或者spyder的用法说明
- ThreadPool的使用
- 【python】python中的定义类属性和对像属性
- Linux中vi显示中文乱码的问题
- 移动互联网派生app研究报告
- 【Python】七段数码管绘制问题
- Jquery向页面append新元素之后,如何解决事件的绑定问题?
- androidstudio can't run git.exe
- python凯撒密码流程图_python实现凯撒密码、凯撒加解密算法
- visio画图——圆柱
- Java的class是什么意思?
- 5步教你成功求职进入BAT
- python虚拟数字人直播间带货
- android图片消失动画效果,用setAnimationStyle来设置popwindow显示消失的动画效果