MaxCompute数据导入导出
MaxCompute数据导入导出
- 1.Tunnel命令导入数据
- 2.MaxCompute Studio导入数据
- 3.Tunnel SDK
- 4.其他导入方式
- 详细介绍请见
MaxCompute提供多种数据导入导出方式,如下所示:
- 直接在客户端使用Tunnel命令。
- 通过MaxCompute Studio工具可视化方式实现本地数据文件导入导出,详情请参见导入导出数据。
- 通过Tunnel提供的SDK自行编写Java工具。
- 通过Flume及Fluentd插件方式导入。
- 通过DataWorks对数据导入和导出,详情请参见数据集成概述。
导出数据请参见Tunnel命令操作中Download的相关命令。
1.Tunnel命令导入数据
1.准备数据
假设您已准备本地文件wc_example.txt,本地存放路径为D:\odps\odps\bin,内容如下:
I LOVE CHINA!MY NAME IS MAGGIE.
I LIVE IN HANGZHOU!I LIKE PLAYING BASKETBALL!
2.创建MaxCompute表
您需要把上面的数据导入到MaxCompute的一张表中,所以需要创建MaxCompute表。
CREATE TABLE wc_in (word string);
3.执行tunnel命令
输入表创建成功后,可以在MaxCompute客户端输入Tunnel命令进行数据的导入,如下所示:
tunnel upload D:\odps\odps\bin\wc_example.txt wc_in;
4.执行成功后,查看表wc_in的记录
说明
(1)有关Tunnel命令的更多详细介绍,例如如何将数据导入分区表等,请参见Tunnel操作。
(2)当表中含有多个列时,可以通过-fd参数指定列分隔符。
2.MaxCompute Studio导入数据
在使用MaxCompute Studio导入数据前,您需要先安装MaxCompute Studio,并配置项目空间链接。
1.准备数据
假设依然是该本地文件wc_example.txt,本地存放路径为D:\odps\odps\bin
2.创建MaxCompute表
您需要把上面的数据导入到MaxCompute的一张表中,所以需要创建MaxCompute表。右键单击项目的 tables&views列表:
执行成功,则建表成功。
3上传数据文件
右键单击tables&views列表中新建的表wc_in
3.Tunnel SDK
具体略:主要通过java对Tunnel源文件进行修改以及配置pom.xml文件
4.其他导入方式
除了通过客户端及Tunnel Java SDK导入数据,阿里云数加数据集成、开源的Sqoop、Fluentd、Flume、LogStash 等工具都可以进行数据导入到MaxCompute,详情请参见数据上传下载-工具介绍。
详细介绍请见
https://help.aliyun.com/document_detail/27809.html?spm=a2c4g.11186623.6.578.14502185gwthBb
MaxCompute数据导入导出相关推荐
- hive数据导入导出
Hive数据导入导出的几种方式 一,Hive数据导入的几种方式 首先列出讲述下面几种导入方式的数据和hive表. 导入: 本地文件导入到Hive表: Hive表导入到Hive表; HDFS文件导入到H ...
- [转载]在SQL Server数据库之间进行数据导入导出,OPENDATASOURCE
需要在c盘下先建立一个data.txt文件,然后在文件的第一行写上你要导出的列,不如说要导出id和name这两列,就在第一行写上 id,name 然后保存,使用下列SQL就可以了,你如果要保持原有的I ...
- (转)资料收集,新手必备的sql数据导入导出知识
转载自csdn SQL SERVER 与ACCESS.EXCEL的数据转换 熟悉SQL SERVER 2000的数据库管理员都知道,其DTS可以进行数据的导入导出,其实,我们也可以使用Transact ...
- DB2数据导入导出的小结
Db2的数据迁移,最常用的就是导入导出功能,而导入导出的命令貌似简单,实则内含玄机千变万化,这儿就工作中常用到的命令,小结了一下. 一.数据导入导出基础的格式知识 DEL:界定的ASCII文件,行分隔 ...
- oracle数据库数据导入导出步骤(入门)
oracle数据库数据导入导出步骤(入门) 说明: 1.数据库数据导入导出方法有多种,可以通过exp/imp命令导入导出,也可以用第三方工具导出,如:PLSQL 2.如果熟悉命令,建议用exp/i ...
- 使用Transact-SQL进行数据导入导出方法详解
本文为原创,如需转载,请注明作者和出处,谢谢! 本文曾发表于IT168:http://tech.it168.com/db/s/2006-08-16/200608160913336_1.shtml ...
- Oracle数据导入导出imp/exp
功能:Oracle数据导入导出imp/exp就相当与oracle数据还原与备份. 大多情况都可以用Oracle数据导入导出完成数据的备份和还原(不会造成数据的丢失). Oracle有个好处,虽然 ...
- linux中mongo的导出数据,Linux下mongodb安装及数据导入导出教程(示例代码)
Linux下mongodb安装及数据导入导出教程 #查看linux发行版本 cat /etc/issue #查看linux内核版本号 uname -r 一.Linux下mongodb安装的一般步骤 1 ...
- 利用sqoop将hive数据导入导出数据到mysql
http://niuzhenxin.iteye.com/blog/1726414 运行环境 centos 5.6 hadoop hive sqoop是让hadoop技术支持的clouder公司 ...
最新文章
- 运用.NET读写Windows注册编辑表
- 数字图像处理知识点总结
- css控制边界与边框示例(内边距、外边距使用方法)
- 在字符串中附加格式化的字符串
- A*寻路算法与它的速度
- N小时改变一次url时间戳的方法
- 论得失。。。技术方向
- python矩阵对角化_numpy创建单位矩阵和对角矩阵的实例
- mysql查询特殊符号时_数据库查询中的特殊字符的问题_MySQL
- 2021年中国电子高度表市场趋势报告、技术动态创新及2027年市场预测
- Swift:带有私有设置方法的公有属性
- [BZOJ 1070] [SCOI2007] 修车
- 使用监控宝监控php-fpm状态
- 斗牛(牛牛)概率计算器
- win7休眠的开启与关闭方法
- 计算两个矩形的IOU交并比_Python
- 克服神经网络中的灾难性遗忘(EWC):Overcoming catastrophic forgetting inneural networks
- 微信小程序订阅消息失败
- 【计算机基础-二进制的原码,反码,补码,真值】
- Ardunio开发实例-BMP183温度传感器