使用MaxCompute LOAD命令批量导入OSS数据最佳实践—STS方式LOAD开启KMS加密OSS数据

2024-04-21 08:00:45

简介： MaxCompute使用load overwrite或load into命令将外部存储的数据（如：oss）导入到MaxCompute前的授权操作。

MaxCompute使用load overwrite或load into命令将外部存储的数据（如：oss）导入到MaxCompute前的授权操作。

一.导入之前需要先对MaxCompute进行授权。

当MaxCompute和OSS的Owner是同一个账号时，单击此处完成一键授权。（本文已此为例进行授权说明）
当MaxCompute和OSS的Owner不是同一个账号时，需进行自定义授权，详情请参见STS模式授权

二.由于OSS数据设置KMS加密，所以需要目标Bucket的文件访问权限。

否则报以下错误：

解决方案：

第一种方式：

1.登陆RAM访问控制台，点击RAM角色管理

2.搜索框搜索odps使用访问oss的角色AliyunODPSDefaultRole

3.添加权限

4.选择自定义策略权限。(前提要新建完成自定义策略，脚本模式配置可参考如下：)

{

"Version": "1",

"Statement": [

{

"Effect": "Allow",

"Action": [

"kms:Decrypt"

],

"Resource": [

"acs:kms:*:xxxxx:*"//示例表示具有当前所有KMS的解密权限。若要针对某个KMS密钥进行解密，此处可输入对应的CMK ID。

]

}

]

}

5.点击确定

第二种方式：

1.登陆RAM访问控制台，点击RAM角色管理

2.搜索框搜索odps使用访问oss的角色AliyunODPSDefaultRole

3.添加权限

4.选择系统策略权限AliyunKMSFullAccess（管理密钥管理服务(KMS)的权限），管理KMS最大的权限可以选择使用

5.点击确定

三.验证结果

原文链接

本文为阿里云原创内容，未经允许不得转载。

使用MaxCompute LOAD命令批量导入OSS数据最佳实践—STS方式LOAD开启KMS加密OSS数据相关推荐

基于阿里云 MaxCompute 构建企业云数据仓库CDW的最佳实践建议
简介: 通过我们背后的指导思想和我们给出的技术解决方案,希望与大家能够一起探索一些新的基于云上的数据仓库构建的最佳实践,从而尽量避免走弯路.这就是我今天想跟大家分享的内容与目的. 在本文中阿里云资深产 ...
东网科技荣膺2016中国大数据最佳实践奖
11月24日,由中国软件网主办的数据趴活动圆满落幕,活动现场隆重揭晓了大数据领域的重磅榜单,旨在对大数据领域中表现突出的企业.人物进行表彰.东网科技有限公司(以下简称"东网科技") ...
【TOP100】100个中国大数据应用最佳实践案例—为您打开万亿元大数据产业的财富之门
热门下载(点击标题即可阅读) ☞[下载]2015中国数据分析师行业峰会精彩PPT下载(共计21个文件) 2017年3月28日至29日,由工业和信息化部指导.中国信息通信研究院和数据中心联盟主办的&qu ...
matlab如何在word中插入多个表格,怎么把excel中的数据批量导入到word中的表格中《不同表格间的数据导入》...
如何将excel表格中大量数据导入matlab中并作图工具:MATLAB.office excel 将待导入的矩阵结构据录入Excel中,录入时注意行列原矩阵一一对应. 录入完以后保存数据,为了后续 ...
大数据最佳实践-hbase
目录概述架构 MemStore WAL HMaster 读流程写流程 Memstore Flush Flush过程 StoreFile Compaction Region Split 优化 re ...
离线批量数据通道Tunnel的最佳实践及常见问题
基本介绍及应用场景 Tunnel是MaxCompute提供的离线批量数据通道服务,主要提供大批量离线数据上传和下载, 仅提供每次批量大于等于64MB数据的场景,小批量流式数据场景请使用DataHub实 ...
大数据最佳实践-flink
目录概述特点 API 架构任务调度原理概念 Time Window Event Time Watermark 有状态的计算一致性 7.2 检查点: 保证exactly-once Statef ...
最佳实践：使用阿里云CDN加速OSS访问
简介: 用户直接访问OSS资源,访问速度会受到OSS的下行带宽以及Bucket地域的限制.如果通过CDN来访问OSS资源,带宽上限更高,并且可以将OSS的资源缓存至就近的CDN节点,通过CDN节点进行 ...
dockerfile构建镜像的命令_编写Dockerfile的最佳实践
虽然 Dockerfile 简化了镜像构建的过程,并且把这个过程可以进行版本控制,但是很多人构建镜像的时候,都有一种冲动--把可能用到的东西都打包到镜像中.这种不正当的 Dockerfile 使用也会 ...

最新文章

热门文章