分析型数据库 AnalyticDB学习 ----基本介绍

AnalyticDB简介

阿里巴巴自主研发的海量数据实时并发在线分析的云计算服务，可以在毫秒级针对千亿级数据进行多维分析和业务探索.具备海量数据的自由计算和极速响应能力（数据很多，反应很快，计算很快，可以处理高并发这个意思）

Analytic核心功能和特点

*Analytic核心功能

（1）分档的储存
（2）自由的查询
（3）智能的优化
（4）分层的安全
（5）方便的接口
（6）弹性的多租户

*Analytic特色功能

（1）智能全索引
（2）多值列
（3）空间检索
（4）海量dump
（5）全文检索（ai分词，全文索引）
（6）海量计算（图片处理）

*Analytic关键技术

（1）列存

 1. 优点： 分析统计性能、大宽表查询少量列时省IO2. 劣势：数据分布分散时一次查询很多列浪费IO3. 特色：聚集列（预排序）缓解劣势

（2）分级存储

 1. 高性能实例：查询性能快，并发能力强，存储成本高，适用于大量数据灵活分析，高并发查询等场景。2. 大存储实例：存储成本很低，查询性能相对差，并发弱，适用于海量数据的查询明细，低并发较高延迟分析等场景

Analytic优点

（1）超大规模集群

     1. 支持2000+节点集群2. 单表1pb数据量3. 单表亿万记录的多表关联分析

（2）高性能

     1. 写入数据1秒内立即可查询分析，200万+/秒2. 支持3万+的并发查询能力3. 无需预先进行建模的情况下实现千亿数据秒级计算4. 支持行列混存功能，支持表级别配置存储模式，优化查询性能

（3）高可用、可靠

     1.集群节点 active-active架构，任意物理机损坏，业务无感知运行，自动恢复2. 无状态化设计，存储和计算分离3. 数据双层冗余设计，数据可靠性99.9999%

（4）功能

     1. 文本分析。ali分词2. gpu硬件加速：更高性能和更低成本3. 向量分析：支持向量计算

Analytic使用场景

（1） app类型：查询简单，没有多表关联操作并且计算返回结果数据不多qps（单位时间内处理的流量，最大吞吐能力）较高，rt（响应时间）在500毫秒以下
（2） BI类型：实时数据仓库，一张事实表与多维度表进行join，较多的分组，排序操作qps较低，rt1000毫秒以下
（3） Adhoc类型：多张事实表进行join并进行分组，排序，或者返回大量结果，qps等于或者高于bi类型，平均在8000毫秒

分析型数据库 AnalyticDB学习 ----基本介绍相关推荐

回首2018 | 分析型数据库AnalyticDB：不忘初心砥砺前行...
导读分析型数据库AnalyticDB(下文简称"ADB"),是阿里巴巴自主研发.唯一经过超大规模以及核心业务验证的PB级实时数据仓库.截止目前,现有外部支撑客户既包括传统的大中型 ...
回首2018 | 分析型数据库AnalyticDB：不忘初心砥砺前行
导读分析型数据库AnalyticDB(下文简称"ADB"),是阿里巴巴自主研发.唯一经过超大规模以及核心业务验证的PB级实时数据仓库.截止目前,现有外部支撑客户既包括传统的大中型 ...
回首2018 | 分析型数据库AnalyticDB: 不忘初心砥砺前行...
题记分析型数据库AnalyticDB(下文简称ADB),是阿里巴巴自主研发.唯一经过超大规模以及核心业务验证的PB级实时数据仓库.截止目前,现有外部支撑客户既包括传统的大中型企业和政府机构,也包括众 ...
阿里巴巴下一代云分析型数据库AnalyticDB入选Forrester Wave™ 云数仓评估报告解读
前言近期, 全球权威IT咨询机构Forrester发布"The Forrester WaveTM: CloudData Warehouse Q4 2018"研究报告,阿里巴巴分析 ...
阿里下一代云分析型数据库AnalyticDB入选Forrester云化数仓象限
前言近期, 全球权威IT咨询机构Forrester发布"The Forrester Wave: CloudData Warehouse Q4 2018"研究报告,阿里巴巴分析型数 ...
阿里云分析型数据库AnalyticDB：使用Logstash插件进行高效数据写入
前言 AnalyticDB(简称ADB,ADS,早期项目名Garuda)是阿里巴巴自主研发的海量数据实时高并发在线实时分析型数据库(Real-Time OLAP).自2012年第一次在集团发布上线以来 ...
阿里大数据之-分析型数据库 AnalyticDB(技术架构及主要组件工作原理详解)
概念介绍 1.ECU:弹性计算单元(Elastic compute units 简写ECU)是AnalyticDB用来衡量实例计算能力的元单位.一个数据库由若干个同一类型的ECU节点组成,例如数据库A ...
分析型数据库(AnalyticDB)-V2.7版本正式支持全文索引
AnalyticDB 全文索引介绍背景大数据处理技术经过若干年的发展,结构化数据检索已经逐渐有了多元化的.丰富的解决方案.但是与此同时,比如文本.图片.视频等非结构化数据的产生速度越来越快,数据量 ...
cdc工具 postgresql_SQLServer CDC数据通过Kafka connect实时同步至分析型数据库 AnalyticDB For PostgreSQL及OSS-阿里云开发者社区...
背景 SQLServer为实时更新数据同步提供了CDC机制,类似于Mysql的binlog,将数据更新操作维护到一张CDC表中. 开启cdc的源表在插入INSERT.更新UPDATE和删除DELETE ...

分析型数据库 AnalyticDB学习 ----基本介绍

分析型数据库 AnalyticDB学习 ----基本介绍

AnalyticDB简介

Analytic核心功能和特点

*Analytic核心功能

*Analytic特色功能

*Analytic关键技术

Analytic优点

Analytic使用场景

分析型数据库 AnalyticDB学习 ----基本介绍相关推荐

最新文章

热门文章