阿里系云上离线数仓简单介绍

一、DataHub简介

阿里云流数据处理平台DataHub是流式数据(Streaming Data)的处理平台，提供对流式数据的发布 (Publish)，订阅 (Subscribe)和分发功能，DataHub服务也提供分发流式数据到各种云产品的功能，目前支持分发到MaxCompute(原ODPS)，OSS等。

DataHub作为一个流式数据处理服务，结合阿里云众多云产品，可以构建一站式的数据处理服务。

二、MaxCompute简介

MaxCompute（原ODPS）是一项大数据计算服务，它能提供快速、完全托管的PB级数据仓库解决方案，使您可以经济并高效的分析处理海量数据。

盘古：相当于Hadoop中的HDFS
伏羲：相当于Hadoop中的YARN
MaxCompute Engine：相当于MR、Tez等计算引擎

三、各产品类比

四、云上数仓简单搭建过程

五、简单使用

阿里系云上离线数仓简单介绍相关推荐

Vertica系列： Vertica 数仓简单介绍
从多个博主那里简单学习一下下,复制粘贴的文字,粗略了解 1.简介 Vertica是一款基于列存储的MPP(massively parallel processing)架构的数据库.它可以支持存放多至P ...
在阿里云上安装MySQL的简单教程
在阿里云上安装MySQL的简单教程 1,安装docker docker? 因为系统差异和软件之间的证书版权问题,要直接在CentOS或ubuntu系统上安装MySQL或其他软件会非常繁琐,所以我们有了 ...
离线数仓模型构建的简单见解
离线数仓模型构建的简单见解 1.业务数据与架构变化情况说明 2.数据分层说明 2.1 ods层模型说明 2.2 dim层模型说明 2.2.1 json 解析打宽成json基础表与分类拆解或合并 2.2 ...
一文读懂云原生一体化数仓
简介:阿里云云原生一体化数仓产品技术深度解读. 本文大纲一.云原生一体化数仓的发布背景 1 市场情况 2 挑战和痛点二.云原生一体化数仓是什么三.云原生一体化数仓的技术理念 1 离线实时一 ...
云原生一体化数仓发布
云原生一体化数仓是集阿里云大数据产品MaxCompute.DataWorks.Hologres三种产品能力于一体的一站式大数据处理平台.技术上通过离线实时一体.分析服务一体.湖仓一体和数据综合治理架构 ...
离线数仓03——业务数据采集平台
文章目录第1章电商业务简介 1.1 电商业务流程 1.2 电商常识 1.2.1 SKU和SPU 1.2.2 平台属性和销售属性第2章业务数据介绍 2.1 电商系统表结构 2.1 MySQL安装 ...
【离线数仓-2-数据采集】
离线数仓-2-数据采集离线数仓-2-数据采集 1.用户行为日志数据模拟 1.用户行为日志的介绍 2.埋点有哪些 3.用户行为日志内容 4.用户行为日志格式 5.用户行为日志数据采集 1.节点之间配置 ...
尚硅谷-离线数仓-笔记
尚硅谷-离线数仓-笔记一.数仓建模理论第一章数仓概述 1.1 数仓概念数据仓库是一个为数据分析而设计的企业级数据管理系统.数据仓库可集中.整合多个信息源的大量数据,借助数据仓库的分析能力,企业 ...
离线数仓建设及技术选型
离线数仓架构设计 1．建设数仓的目的主要是增加数据计算的复用性.每次新增加统计需求时,不至于从原始数据进行计算,而是从半成品继续加工而成. 2. 数据仓库作用整合企业业务数据,建立统一的数据中心: ...

阿里系云上离线数仓简单介绍

阿里系云上离线数仓简单介绍

阿里系云上离线数仓简单介绍相关推荐

最新文章

热门文章