MaxCompute数据导入导出

  • 1.Tunnel命令导入数据
  • 2.MaxCompute Studio导入数据
  • 3.Tunnel SDK
  • 4.其他导入方式
  • 详细介绍请见

MaxCompute提供多种数据导入导出方式,如下所示:

  • 直接在客户端使用Tunnel命令。
  • 通过MaxCompute Studio工具可视化方式实现本地数据文件导入导出,详情请参见导入导出数据。
  • 通过Tunnel提供的SDK自行编写Java工具。
  • 通过Flume及Fluentd插件方式导入。
  • 通过DataWorks对数据导入和导出,详情请参见数据集成概述。

导出数据请参见Tunnel命令操作中Download的相关命令。

1.Tunnel命令导入数据

1.准备数据
假设您已准备本地文件wc_example.txt,本地存放路径为D:\odps\odps\bin,内容如下:

I LOVE CHINA!MY NAME IS MAGGIE.
I LIVE IN HANGZHOU!I LIKE PLAYING BASKETBALL!

2.创建MaxCompute表
您需要把上面的数据导入到MaxCompute的一张表中,所以需要创建MaxCompute表。

CREATE TABLE wc_in (word string);

3.执行tunnel命令
输入表创建成功后,可以在MaxCompute客户端输入Tunnel命令进行数据的导入,如下所示:

tunnel upload D:\odps\odps\bin\wc_example.txt wc_in;

4.执行成功后,查看表wc_in的记录

说明
(1)有关Tunnel命令的更多详细介绍,例如如何将数据导入分区表等,请参见Tunnel操作。
(2)当表中含有多个列时,可以通过-fd参数指定列分隔符。

2.MaxCompute Studio导入数据

在使用MaxCompute Studio导入数据前,您需要先安装MaxCompute Studio,并配置项目空间链接。

1.准备数据
假设依然是该本地文件wc_example.txt,本地存放路径为D:\odps\odps\bin
2.创建MaxCompute表
您需要把上面的数据导入到MaxCompute的一张表中,所以需要创建MaxCompute表。右键单击项目的 tables&views列表:

执行成功,则建表成功。

3上传数据文件
右键单击tables&views列表中新建的表wc_in

3.Tunnel SDK

具体略:主要通过java对Tunnel源文件进行修改以及配置pom.xml文件

4.其他导入方式

除了通过客户端及Tunnel Java SDK导入数据,阿里云数加数据集成、开源的Sqoop、Fluentd、Flume、LogStash 等工具都可以进行数据导入到MaxCompute,详情请参见数据上传下载-工具介绍。

详细介绍请见

https://help.aliyun.com/document_detail/27809.html?spm=a2c4g.11186623.6.578.14502185gwthBb

MaxCompute数据导入导出相关推荐

  1. hive数据导入导出

    Hive数据导入导出的几种方式 一,Hive数据导入的几种方式 首先列出讲述下面几种导入方式的数据和hive表. 导入: 本地文件导入到Hive表: Hive表导入到Hive表; HDFS文件导入到H ...

  2. [转载]在SQL Server数据库之间进行数据导入导出,OPENDATASOURCE

    需要在c盘下先建立一个data.txt文件,然后在文件的第一行写上你要导出的列,不如说要导出id和name这两列,就在第一行写上 id,name 然后保存,使用下列SQL就可以了,你如果要保持原有的I ...

  3. (转)资料收集,新手必备的sql数据导入导出知识

    转载自csdn SQL SERVER 与ACCESS.EXCEL的数据转换 熟悉SQL SERVER 2000的数据库管理员都知道,其DTS可以进行数据的导入导出,其实,我们也可以使用Transact ...

  4. DB2数据导入导出的小结

    Db2的数据迁移,最常用的就是导入导出功能,而导入导出的命令貌似简单,实则内含玄机千变万化,这儿就工作中常用到的命令,小结了一下. 一.数据导入导出基础的格式知识 DEL:界定的ASCII文件,行分隔 ...

  5. oracle数据库数据导入导出步骤(入门)

    oracle数据库数据导入导出步骤(入门) 说明:  1.数据库数据导入导出方法有多种,可以通过exp/imp命令导入导出,也可以用第三方工具导出,如:PLSQL  2.如果熟悉命令,建议用exp/i ...

  6. 使用Transact-SQL进行数据导入导出方法详解

    本文为原创,如需转载,请注明作者和出处,谢谢! 本文曾发表于IT168:http://tech.it168.com/db/s/2006-08-16/200608160913336_1.shtml    ...

  7. Oracle数据导入导出imp/exp

    功能:Oracle数据导入导出imp/exp就相当与oracle数据还原与备份.   大多情况都可以用Oracle数据导入导出完成数据的备份和还原(不会造成数据的丢失).  Oracle有个好处,虽然 ...

  8. linux中mongo的导出数据,Linux下mongodb安装及数据导入导出教程(示例代码)

    Linux下mongodb安装及数据导入导出教程 #查看linux发行版本 cat /etc/issue #查看linux内核版本号 uname -r 一.Linux下mongodb安装的一般步骤 1 ...

  9. 利用sqoop将hive数据导入导出数据到mysql

    http://niuzhenxin.iteye.com/blog/1726414 运行环境  centos 5.6   hadoop  hive sqoop是让hadoop技术支持的clouder公司 ...

最新文章

  1. 运用.NET读写Windows注册编辑表
  2. 数字图像处理知识点总结
  3. css控制边界与边框示例(内边距、外边距使用方法)
  4. 在字符串中附加格式化的字符串
  5. A*寻路算法与它的速度
  6. N小时改变一次url时间戳的方法
  7. 论得失。。。技术方向
  8. python矩阵对角化_numpy创建单位矩阵和对角矩阵的实例
  9. mysql查询特殊符号时_数据库查询中的特殊字符的问题_MySQL
  10. 2021年中国电子高度表市场趋势报告、技术动态创新及2027年市场预测
  11. Swift:带有私有设置方法的公有属性
  12. [BZOJ 1070] [SCOI2007] 修车
  13. 使用监控宝监控php-fpm状态
  14. 斗牛(牛牛)概率计算器
  15. win7休眠的开启与关闭方法
  16. 计算两个矩形的IOU交并比_Python
  17. 克服神经网络中的灾难性遗忘(EWC):Overcoming catastrophic forgetting inneural networks
  18. 微信小程序订阅消息失败
  19. 【计算机基础-二进制的原码,反码,补码,真值】
  20. Ardunio开发实例-BMP183温度传感器

热门文章

  1. 离散数学学习笔记——第一讲——集合论基础(1.4集合的运算定律)
  2. HIVE分区表添加字段cascade 执行时间过长出现bug
  3. Python OpenCV 视频的读取和保存
  4. 基于 USDT 源码学习 ERC-20 标准
  5. 「SymPy」符号运算(2) 各种形式输出、表达式的化简合并与展开
  6. Pandas读存Excel大全
  7. 膜拜大佬!首发10万字Android开发实战文档,深度好文
  8. ubuntu安装nvm并安装node步骤
  9. 剪辑pr:2、视频特效、关键帧动画预设
  10. 杂谈,关于CG制作流程、制作软件