华为大数据战略_华为大数据开源战略部部长陈亮 - Apache CarbonData,实现大数据即席查询秒级响应...
1.实现大数据即席查询秒级响应
2.Liang Chen / 陈 亮 华为大数据开源开发部Leader Apache CarbonData PMC & CommitterEmail:chenliang613@apache.org10多年大数据和BI项目开发和实践经验,对大 数据开源技术(Hadoop,Spark,CarbonData等) 有深入理解.
3.⼤数据现在和未来将深刻的改变运营商 网络增效 网络性能管理与SQM策略保障 快速决策与根因分析定位 网络问题与规划 客户关怀和CEM 360°C客户洞察 客户忠诚度维系 客户关怀与流程优化 市场分析 实时营销与推荐 客户精细分群与个性化推荐 预测与影响力分析 数据货币化 数据变现 OTT开放竞合 M2M和位置分析 ONT Smarter SoftCom 业务和运营的智能融合 2 CloudDSL/OL T MxU ADSL VDSL G.Fast Cloud OS/OpenStack OM Team Biz Customer Consumer Partners 67 4 Operations Big Data Suits apps for OM apps for Biz apps for consumer 8 API E2E ICT Resource Orchestration Engine OSS suits Big Data Suits BSS suits E2E ICT Resource Orchestration Engine RaaS NaaS OpenStack PCRF CaaS Cloud OS/OpenStack(Local Resource) + Middleware MxU CPE RRU Small Cell Small Cell RRU SDN SDN D 以太+OTN (Metro) D D 3 CloudBB 1 CloudEdg e RNC SRC SD N Controller BRAS S/ P GW GGSN FW DPI vCPE SBC NAT IT apps PaaS Cloud OS/OpenStack (Local Resource, IaaS) D Router + WDM (Backbone) DD 5 Apps & Services SD N SGSN controller MME Telco apps IT apps IMS SMS/IPTV… (SaaS) HSS Middleware (PaaS) Cloud OS/OpenStack (Local Resource, IaaS) GSM UMTS LTE Cloud OS/OpenStack 1 SDN实时大象流挖掘 2 IPRAN流量仿真 3 SON 网络自动实时优化 4 快速故障关联处理 5 小区拥塞动态控制 6 潜在离网用户维挽 7 一站式服务优化 8 开放变现
4.How to choose storage for complex big data requirements?
5.NoSQL Database • Key-Valuestore:low latency, <5ms • Can not support multi-dimension query
6.Multi-dimensional problem • Pre-compute all aggregation combinations •Complexity:O(2^n) • Dimension < 10 • Too much space • Slow loading speed
7.Shared nothing database • Parallel scan + distributed compute • Questionable scalability and fault-tolerance • Cluster size < 100 data node • Not suitable for big batch job • Can not integrate with Hadoop ecosystem
8.Search engine • All column indexed • Fast searching • Simple aggregation • Designed for search but not OLAP • complexcomputation:TopN, join, multi-level aggregation • No SQL support
9.SQL on Hadoop • Modern distributed architecture, scale well in computation. • Pipelinebased:'>based:
华为大数据战略_华为大数据开源战略部部长陈亮 - Apache CarbonData,实现大数据即席查询秒级响应...相关推荐
- 大数据即席查询工具——秒级响应
报表是企业管理的基本措施和途径,是企业的基本业务要求,也是实施 BI战略的基础.报表可以帮助企业访问.格式化数据,并把数据信息以可靠和安全的方式呈现给使用者.在企业管理过程中,报表往往都会通过一些简洁 ...
- 视频教程-Apache CarbonData线上活动-大数据
Apache CarbonData线上活动 CSDN讲师名下集合了诸多业界知名讲师的公开课内容,内容涵盖人工智能.大数据.区块链等诸多热门技术领域的最佳技术实践,聚合美团.滴滴.AWS.科大讯飞等知名 ...
- es对几十亿数据能达到秒级响应吗_万亿数据下的多维实时分析系统,如何做到亚秒级响应...
导语 当业务发展到一定规模,实时数据仓库是一个必要的基础服务.从数据驱动方面考虑,多维实时数据分析系统的重要性也不言而喻.但是当数据量巨大的情况下,拿腾讯看点来说,一天上报的数据量达到万亿级的规模,要 ...
- 万亿数据秒级响应,Apache Doris 在360 数科实时数仓中的应用
作者|360数科中间件团队 编辑整理|SelectDB 作为以人工智能驱动的金融科技平台,360数科携手金融合作伙伴,为尚未享受到普惠金融服务的优质用户提供个性化的互联网消费金融产品,致力于成为连接用 ...
- Hologres助力飞猪双11实时数据大屏秒级响应
简介: 本文重点介绍Hologres如何落地阿里巴巴飞猪实时数仓场景,并助力飞猪双11实时数据大屏3秒起跳,全程0故障. 摘要:刚刚结束的2020天猫双11中,MaxCompute交互式分析(下称Ho ...
- Hologres 助力飞猪双11实时数据大屏秒级响应
摘要:刚刚结束的2020天猫双11中,MaxCompute交互式分析(下称Hologres)+实时计算Flink搭建的云原生实时数仓首次在核心数据场景落地,为大数据平台创下一项新纪录.借此之际,我们将 ...
- 华为鸿蒙智慧屏_华为鸿蒙系统到底什么样?荣耀智慧屏秀出答案
8月10日下午,荣耀智慧屏正式发布.这是全球首款采用华为鸿蒙操作系统的终端产品,也是华为智慧屏战略的第一款产品. 荣耀智慧屏的发布,不仅是鸿蒙系统的应用,更不是那个55英寸的屏幕,而是华为技术实力的展 ...
- 华为摄像机搜索软件_华为安防:举智能之火 成燎原之势
智能时代,宁静的安防产业已经开始动荡,新的市场格局正在形成. 传统厂商的"护城河"颓靡,行业竞争犬牙交错,新技术正在延伸着安防的边界,新市场.新生态出现带来的行业新气象,安防产业链 ...
- 华为P20PRO怎样开通云闪付_华为P20NFC_华为p20nfc怎么打开_华为p20nfc刷卡怎么用-站长之家...
伴随着第三方Pay支付的发展和移动公交的需求,这要求智能手机产品必须内置NFC芯片.对于上一周发布的国行华为P20旗舰手机目前受到了不少分 北京时间 12 月 20 日,在广州汇华希尔顿逸林酒店举办的 ...
最新文章
- 用 Python 写 3D 游戏,太赞了
- 路由器配置与管理完全手册(Cisco篇)学习感想
- SAP登录IP绑定校验
- POJ 3280 Cheapest Palindrome(DP 回文变形)
- ITK:在签名图像中找到零交叉点
- (已解决)登录火狐浏览器账号后没有同步数据--博主的奇妙寻号之旅
- layout_gravity 和 gravity
- 新电脑到手要干的事情
- 基于CentOS虚拟机的Hadoop安装教程(自用备忘)
- axure8 Mac破解版+汉化包
- 微型计算机独立显卡,计算机显卡分为哪几类?有什么特点是?
- cocos creator实现读取白鹭movieClip组件(尝试)
- QQ截图别人收不到,显示[图片][图片],QQ录屏不了,QQ图片分裂
- 【Zynq UltraScale+ MPSoC解密学习1】Zynq UltraScale+的基本介绍
- 什么是信息技术外包?
- Mathematica 作图详解
- 杨辉三角 c语言 二维数组
- 向大家推荐一部小说《鉴鬼实录》
- 从给定网页上下载img src= /格式的图片,并保存到制指定路径
- see declaration of 'i'
热门文章
- Pinia 详细教程
- openlayers6【二十二】vue addLayer实现点击地图添加图标要素信息,编辑点位信息
- 数据资产管理实践白皮书(5.0版)
- SpringCloud Feign调用报错feign.RetryableException: too many bytes written executing
- 【STM32笔记】低功耗模式下的RTC唤醒(非闹钟唤醒,而是采用RTC_WAKEUPTIMER)
- PyCharm中的错误:following errors occurred on attempt to save files和Unable to save settings: Failed 的解决方案
- Java黑皮书课后题第4章:4.1(几何:五边形的面积)编写程序,提示用户输入从五边形中心到定点的距离,计算五边形的面积,结果保留两位小数
- STemWin 入门(1)
- gcd(int a, int b) //求最大公约数
- 毕业设计 Spring Boot的网上购物商城系统(含源码+论文)