阿里云大数据计算服务MaxCompute(下篇)
关于阿里云大数据计算服务MaxCompute的详细内容:
阿里云大数据计算服务MaxCompute使用教程
(MaxCompute(原ODPS)是一项大数据计算服务,它能提供快速、完全托管的PB级数据仓库解决方案,使您可以经济并高效的分析处理海量数据。)
如果您是 MaxCompute 初学者
如果您是初学者,建议您从如下模块开始读起:
简介: MaxCompute 产品的总体介绍以及包含的主要功能。通过阅读该章节,您会对 MaxCompute 有一个总体的认识。 快速开始:通过示例,指导您如何进行申请账号、安装客户端、创建表、授权、导入导出数据、运行 SQL 任务、运行 UDF/Mapreduce 程序等操作。 基本介绍:MaxCompute 的基本概念及常用命令介绍。您可以进一步熟悉如何操作 MaxCompute。 工具:在分析数据之前,您需要掌握 MaxCompute 常用工具的下载,配置以及使用方法。我们提供以下客户端工具: Client:您可以通过此工具对 MaxCompute 进行操作。
建议您熟悉以上的模块后,再有针对性地对其他模块进行深入学习。
如果您是数据分析师
如果您是数据分析师,建议您熟读 SQL 模块:
SQL:您可以查询并分析存储在 MaxCompute 上的大规模数据。包含的主要功能如下: 支持 DDL 语句,您可以通过 Create、Drop 和 Alter 对表和分区进行管理。 您可以通过 Select 选择表中的某几条记录;通过 Where 语句查看满足条件的记录,实现过滤功能。 您可以通过等值连接 Join 实现两张表的关联。 您可以通过对某些列 Group By,实现聚合操作。 您可以通过 Insert overwrite/into 把结果记录插入到另一张表中。 你可以通过内置函数和自定义函数(UDF)来实现一系列的计算。
如果您拥有一定开发经验
如果您拥有一定的开发经验,了解分布式概念,并且某些数据分析可能无法用 SQL 来实现,此时推荐您学习 MaxCompute 更高级的功能模块。如下所示:
MapReduce:MaxCompute 提供的 Java MapReduce 编程模型。您可以使用 MapReduce 提供的接口(Java API)编写 MapReduce 程序,处理 MaxCompute 中的数据。 Graph:一套面向迭代的图计算处理框架。使用图进行建模,图由点(Vertex)和边(Edge)组成,点和边包含权值(Value)。通过迭代对图进行编辑、演化,最终得出结果。 Eclipse Plugin:方便您使用 MapReduce,UDF 以及 Graph 的 Java SDK 进行开发工作。 Tunnel:您可以使用 Tunnel 服务向 MaxCompute 批量上传离线数据或者从 MaxCompute 下载离线数据。 SDK: Java SDK:向开发者提供 Java 接口。 Python SDK:向开发者提供 Python 接口。
注意:
目前 MapReduce 以及 Graph 功能仍处于公测中,若您想使用这部分功能,可以通过工单系统提交申请。申请时请指明您的项目空间名称,我们会在 7 个工作日内处理。
如果您是项目 Owner 或者管理员
如果您是一个项目空间的 Owner 或者管理员,您需要熟知以下模块:
安全指南:您可以通过阅读该章节,了解如何进行给用户授权、跨项目空间的资源共享、设置项目空间的数据保护功能、policy 授权等操作。 MaxCompute 收费指南:介绍 MaxCompute 的收费模式。 以及部分只有项目空间 Owner 才能使用的命令,例如:常用命令 中 其他操作 的SetProject 操作。
内容导读
课时1:客户端配置以及基本命令介绍 03:09
课时2:SQL基本操作介绍 03:42
课时3:tunnel命令操作介绍 21:04
课时4:MaxCompute与主流关系数据库DDl基本语法差异 02:26
课时5:MaxCompute Studio安装配置说明20:52
阿里云大学官网(阿里云大学 - 官方网站,云生态下的创新人才工场)
阿里云大数据计算服务MaxCompute(下篇)相关推荐
- 阿里云大数据计算服务MaxCompute(上篇)
关于阿里云大数据计算服务MaxCompute的详细内容: 阿里云大数据计算服务MaxCompute使用教程 (MaxCompute(原ODPS)是一项大数据计算服务,它能提供快速.完全托管的PB级数据 ...
- 阿里云大数据计算服务MaxCompute
阿里云大数据计算服务MaxCompute 大数据计算服务(MaxCompute,原名ODPS)是一种快速.完全托管的TB/PB级数据仓库解决方案. 当今社会数据收集手段不断丰富,行业数据大量积累,数据 ...
- 阿里云大数据计算服务 - MaxCompute (原名 ODPS)
MaxCompute 是阿里EB级计算平台,经过十年磨砺,它成为阿里巴巴集团数据中台的计算核心和阿里云大数据的基础服务.去年MaxCompute 做了哪些工作,这些工作背后的原因是什么?大数据市场进入 ...
- 阿里云大数据计算服务MaxCompute使用教程
MaxCompute简介 大数据计算服务(MaxCompute,原名ODPS)是一种快速.完全托管的TB/PB级数据仓库解决方案.MaxCompute向用户提供了完善的数据导入方案以及多种经典的分布式 ...
- 【干货索引】阿里云大数据计算服务MaxCompute与生态系统的融合
摘要: MaxCompute大家都不陌生,之前产品名称叫ODPS,之后随国际化而更名.从支持阿里集团内部99%数据业务到计算能力对外输出,帮助政府.互联网公司.金融等进行大数据项目服务,使得数据变现. ...
- Java连接阿里云大数据计算服务Maxcompute(ODPS)
连接阿里大数据服务Maxcompute(以前叫ODPS)需要阿里云账号,IntelliJ IDEA配置Maxcompute步骤查看阿里官方文档:https://help.aliyun.com/docu ...
- 阿里云大数据计算服务MaxCompute命令行工具——odpscmd的操作使用
在MaxCompute生态中,命令行工具究竟处于什么样的位置?它又发挥着什么样的作用?能够帮助开发者如何更好使用MaxCompute?在本文中,阿里巴巴计算平台产品专家曲宁将通过一个完整简单的小例子为 ...
- odps传大文件到oss上_【大数据干货】数据进入阿里云数加-大数据计算服务MaxCompute(原ODPS)的N种方式...
原文链接:http://click.aliyun.com/m/13946/ 想用阿里云大数据计算服务(MaxCompute),对于大多数人首先碰到的问题就是数据如何迁移到MaxCompute中.按照数 ...
- 阿里云数加大数据计算服务MaxCompute文章索引(持续更新201705)
概况介绍: 10年老兵带你看尽MaxCompute大数据运算挑战与实践 什么是阿里云数加大数据计算服务MaxCompute? 一分钟了解阿里云产品:大数据计算服务MaxCompute概述 数加平台如何 ...
最新文章
- jquery 1.6以上版本 全选
- 【leetcode】7.反转整数(Reverse Integer)
- C#游戏开发快速入门教程Unity5.5教程
- 关于[[NSNotificationCenter defaultCenter] addObserver不remove后续又收到通知crash问题
- android另类工具,[置顶] android应用程序开发另解及Android SDK工具集的另类用法
- ThinkPHP讲解(十二)——文本编辑器和ajax传址
- oracle拆分分区语法详解大全_Oracle hash的分区方法详解
- 蓝桥杯 基础练习 龟兔赛跑预测
- 计算机程序C语言若初始数为48,2016年计算机软考程序员模拟选择试题
- python处理异常的方式_Python报错出现异常的介绍,及其处理方式
- sql2000 mysql_sql2000迷你版 超精简版SQL Server 2000数据库下载
- 一文读懂: 什么是用户故事?What is User Stories?
- Dominant Resource Fairness: Fair Allocation of Multiple Resource Types
- 如何提高页面性能并充分利用主机
- 新增用户时输入账号已存在(全局异常处理)
- VUE实现长时间未操作退出登录
- docker logs查看日志
- Visual Studio Code插件
- 电阻(4)之上拉电阻与下拉电阻详解
- 11条职场潜规则助你爱上工作