阿里云-DataWorks- ODPS SQL开发
1、前言
阿里云 数据仓库这一系列断断续续也有很久没有更新了,新年新气象,赶紧追上开写。
2、基本概念
1、ODPS:
Open Data Processing Service, 简称ODPS;是由阿里云自主研发,提供针对TB/PB级数据、实时性要求不高的分布式处理能力,应用于数据分析、挖掘、商业智能等领域;阿里巴巴的离线数据业务都运行在ODPS上;
2、ODPS SQL:
与Hive SQL语法基本一致;适用于海量数据(TB级别),但实时性要求不高的场合,它的每个作业的准备,提交等阶段需要花费较长时间, 因此要求每秒处理几千至数万笔事务的业务是不能用ODPS SQL完成的;
ODPS SQL采用的是类似于SQL的语法,可以看作是标准SQL的子集,但不能因此简单的把ODPS SQL等价成一个数据库,它在很多方面并不具备数据库的特征;
3、 ODPS SQL
做数据分析与IT人员最熟悉使用SQL对数据进行分析统计了。ODPS也支持SQL查询操作,而且语法类似于Hive 的HQL。
SQL操作的主要对象是表,数据量可在T级到P级。
SQL中提供的功能有:
- DLL:表、列、分区、视图、生命周期等操作 ;
阿里云-DataWorks- ODPS SQL开发相关推荐
- 深入解读:获Forrester大数据能力高评价的阿里云DataWorks思路与能力
摘要: Forrester发布了Now Tech: Cloud Data Warehouse Q1 2018报告,报告对云化数据仓库(Cloud Data Warehouse, CDW)的主要功能.区 ...
- 阿里云DataWorks数据集成(DataX)架构实践分享
阿里云DataWorks数据集成(DataX)架构&实践分享 分享嘉宾:罗海伟 阿里云 编辑整理:约理 中国科学院大学 目录 ▌为什么需要数据集成 数据集成的应用场景 数据集成的角色和地位 ▌ ...
- 最详细的【微信小程序+阿里云Web服务】开发部署指引(四):搭建服务端数据库
文章目录 前言 一.连接主机数据库 二.创建数据表结构 三.准备测试数据 专题文章链接 前言 做完了前面的注册申请工作,今天我们开始进行程序的开发. 这篇文章,我们要完成的是服务端数据库表的创建. 一 ...
- 最详细的【微信小程序+阿里云Web服务】开发部署指引(一):准备开始
文章目录 前言 案例说明 专题文章链接 前言 作为一个程序开发的老鸟,有时候想使用微信小程序,开发实现一些实用的小功能.由于小程序往往需要有后台数据的支持,所以一般还需要搭建一个Server服务器,来 ...
- 阿里云城市数据大脑开发规范
课程链接:阿里云城市数据大脑开发规范 本课程是阿里云城市大脑相关开发规范. 2016年10月13日,阿里巴巴集团技术委员会主席王坚在杭州云栖大会上面向全球发布城市数据大脑.城市数据大脑是一座城市的人工 ...
- 最详细的【微信小程序+阿里云Web服务】开发部署指引(十一):开发小程序设置功能
文章目录 前言 一.功能说明 二.设置界面代码实现 1.创建界面Page 2.WXML 3.JS 4.WXSS 三.参数控制逻辑代码实现 1.自动跳转卡片 2.自动播放声音 专题文章链接 前言 案例的 ...
- 在阿里云下安装SQL Server
今天应公司的要求,需要在阿里云上安装sql server 在本地使用,由于自己原来没有涉及过这样的安装所以走了很多的弯路.现在将我的安装过程与大家分享,希望能够帮到想要学习这个方面的人.以下是我用Ce ...
- 基于阿里云 Serverless 函数计算开发的疫情数据统计推送机器人
一.Serverless函数计算 什么是Serverless? 在<Serverless Architectures>中对 Serverless 是这样子定义的: Serverless w ...
- 【人工智能】阿里云城市数据大脑开发规范
20世纪50年代刚提出人工智能时,由于机器计算能力等各方面的极大限制,大家一直努力的方向就是让机器模仿人的智能,著名的图灵测试本质也是在讲机器如何模拟人的智能.但互联网和计算技术发展到今天,除了模拟人 ...
- 阿里云ECS搭建ESP32开发环境
陈拓 2021/01/29-2021/02/03 1. 概述 在<用乐鑫国内Gitee镜像搭建ESP32开发环境> https://zhuanlan.zhihu.com/p/3481060 ...
最新文章
- ios 打电话结束返回到应用中
- python爬虫知识_Python 爬虫技术分享
- Python学习笔记:返回函数
- 熊猫数据集_为数据科学拆箱熊猫
- 8.4. su - root
- c++: size_type与 size_t一些概念
- 微课--25分钟学会使用Python群发电子邮件
- day7 地址 名片管理系统
- bluecam连接步骤说明_迈拓维距Type-C扩展坞手机连接电视图文教程
- MTK平台camera驱动架构分析
- Code-NFine:NFine权限控制
- 某大型连锁超市库存管理系统分析报告
- poj - 2586 - Y2K Accounting Bug
- 大数据培训就业班毕业后通常可以从事哪些领域做哪些方面工作
- 基于微信小程序云开发(校园许愿墙app)2.0稳定版,以发布上线
- 什么是经销商管理系统?企业经销商管理系统优势有哪些?
- 《最强大脑第九季》C#手撸傅立叶残影题目
- mysql handler_delete_MySQL状态变量 Handler_delete和Com_delete关系(转老金)
- 《你好,放大器》----学习记录(一)
- PMP 项目资源管理