入门阿里云Dataphin（1）
Dataphin入门
- Dataphin简介
- 了解Dataphin
Dataphin简介
Dataphin是阿里云研发的一款以数仓规划、数据智能研发、数据资产管理融为一体，面向大数据建设、管理、应用诉求，一站式提供从数据接入到数据消费的智能数据构建与管理的大数据能力，为企业数据中台搭建提供产品、技术和方法论的服务，Dataphin提供了图形化界面操作与代码编写的服务，无需使用客户端命令行或API进行管理操作。
了解Dataphin
Dataphin与阿里云的存储计算引擎Maxcompute、智能图形化分析工具Quick BI结合使用，为数据迁移、治理、规划、可视化及数据应用提供一站式服务。你的数据源可以从MaxCompute、MySQL、DRDS（分布式关系型数据库服务）、SQLServer、Oracle、PostgreSQL、Hive、HDFS、HBase 0.94.X、HBase 1.1.X、MongoDB、FTP、Vertica、AnalyticDB、Elasticsearch引入到Dataphin中。假如你的数据源分布零散在各个系统，在数据开发、数据应用、数据分析时数据难以统一全局数据，你可以将数据迁移到Dataphin进行统一开发和管理。Dataphin提供全量或增量式的数据引入，让数据中台的数据与各平台数据按日、周、月为周期进行同步。Dataphin是大数据智能数仓平台治理、开发、管理的平台，目前已更新至1.8版本（公测中）。
Dataphin的计算类似于Hive跑的MapReduce任务，但是它比Hive快的很多，能在秒级别内完成计算，这依赖于强大的计算存储引擎MaxCompute。你可以使用Dataphin代码任务或Dataphin定制的规范建模进行任务开发，代码任务主要由SQL、Python、Shell开发，同时支持MaxCompute SQL、MaxCompute MR、Spark_Jar_On_MaxCompute、Virtual、函数、资源、即席查询进行开发。
数仓建设首先需要进行数据规范建设，然后基于数据进行开发。
数据开发分为：
功能特性：
后续陆续分享Dataphin、MaxCompute、Quick BI及大数据学习心得。
转载请附上本文链接，错误之处请在评论指出，愿同大家在学习的路上一起成长！
入门阿里云Dataphin（1）相关推荐
- 学生成长计划领取资格考试 - 云计算及云服务器入门阿里云
学生成长计划领取资格考试 - 云计算及云服务器入门|阿里云 1.计算机诞生于( D)年代 A. 2000年代 B. 1980年代 C. 1990年代 D. 1960年代 2.阿里云云服务器ECS的英文 ...
- 入门阿里云物联网平台，使用阿里主推的ALink协议让自己的硬件上云
先声明,我是通过借鉴几位大神的博客实现的: MQTT报文计算器:http://www.norra.cn:9091/ 关于阿里的一些事:https://yq.aliyun.com/teams/250/t ...
- 初学者入门阿里云Haas100开发板基本步骤
2020年9月阿里云云栖大会上发布的haas100开发板非常棒,其设计的初衷是简化开发步骤,做"积木式"的软硬件.但是在跑第一个程序的过程中,还是遇到了很多问题.本文就从零开始,一 ...
- 微信小程序入门-阿里云学生版简单搭建java后台
文章目录 前言 云服务器 购买 安装 连接 直接连接(入门推荐) 通过工具 安全配置 Linux的防火墙 关闭(入门推荐) 放行 阿里云的防火墙 JDK 卸载 解压版(推荐) 下载 上传 安装 yum ...
- 初学者入门阿里云haas510开板式DTU（2.0版本）--510-AS
摘要:相比于haas600,haas团队推出的haas510价格更加便宜,做到了百元以内.2.0版本比1.0版本布局更加合理,USB.用户串口和调试串口采用了不同的硬件接头,不会再发生误插的危险.阿里 ...
- 新手入门阿里云服务器操作指南（图文教程）
最近阿里云活动很多小伙伴买了服务器却不知道怎么用,因此做一个简易的操作指南. 阿里云根据个人需要选合适的云服务器,选好cpu.内存.带宽,地域,这四个是主要的.其他可以默认选择. 一.控制台 控制台可 ...
- python树莓派编程 沃尔弗拉姆_《 Python树莓派编程》——3.3 Python入门-阿里云开发者社区...
本节书摘来自华章出版社<Python树莓派编程>一书中的第3章,第3.3节,作者:[美]沃尔弗拉姆·多纳特(Wolfram Donat)著韩德强 等译,更多章节内容可以访问云栖社区&quo ...
- abaqus实例手册_《ABAQUS 6.14超级学习手册》——1.6 实例快速入门-阿里云开发者社区...
本节书摘来自异步社区<ABAQUS 6.14超级学习手册>一书中的第1章,第1.6节,作者: 齐威 更多章节内容可以访问云栖社区"异步社区"公众号查看. 1.6 实例快 ...
- python es 数据库 复合查询bool_es 入门-阿里云开发者社区
**注意事项-------使用ealsticsearch要配置java的开发环境JDK(1.8以上) ealsticsearch: 索引(Index) 类型(type ...
最新文章
- svm rbf人脸识别 yale_实操课——机器学习之人脸识别
- 虚拟机Ping不通主机解决
- Win7系统分区（C盘）扩容的一种可行的解决方案
- 微信小程序从oracle取数,微信小程序 取随机数
- 南开大学计算机机房,南京大学高性能计算中心揭秘(多图)
- web ch6 表单基础（部分选学）
- 文本搜索 高亮显示
- 工作利用NUnit进行调试
- Enterprise search Callstack in runtime
- 微信小程序 request请求封装
- 2021.08.24学习内容torch.utils.data.DataLoader以及CUDA与GPU的关系
- 20190910：（leetcode习题）FizzBuzz
- 汽车故障检测软件_检测认证事业部软件测评公司党支部与汽车测评管理中心党支部开展党建共建活动...
- 如何过滤freebayes得到原始vcf文件
- 推荐一个Oracle数据库学习网站
- 阿里云服务器搭建及宝塔面板安装（图文教程）
- python中remove函数是什么意思_python中remove函数的用法是什么？
- LTE/LTE advanced——UMTS 长期演进理论与实践——控制面（3）
- decimal 占位吗 负数_如何获取BigDecimal的负数
- Ubuntu系统中各文件夹的作用