王坚十年前的坚持,才有了今天世界顶级大数据计算平台MaxCompute...
如果说十年前,王坚创立阿里云让云计算在国内得到了普及,那么王坚带领团队自主研发的大数据计算平台MaxCompute则推动大数据技术向前跨越了一大步。
数据是企业的核心资产,但十年前阿里巴巴的算力已经无法满足当时急剧增长数据量的需求。基于Hadoop搭建集群是当时解决大规模数据计算的主流方案,Hadoop生态已经比较成熟,而且在规模上也可以解决当时阿里遇到的性能瓶颈。但刚加入阿里的王坚却另辟蹊径,决定自研一个大数据计算平台,也就是今天的MaxCompute。
但王坚看到,当时淘宝的业务还在快速增长,如果用Hadoop搭建的计算平台会再次遇到挑战,更别提为外部企业提供算力。
也正是因为这一坚持,才有了今天EB级的大数据计算平台MaxCompute。过去十年,MaxCompute打破了多个记录:2013年,突破了单集群内5000台服务器同时计算的局限,如今单集群已超过1万台的规模;2015年,打破计算界奥运会SortBenchmark的4个世界纪录,用不到7分钟便完成了100TB的数据排序,刷新了ApacheSpark 23.4分钟的纪录;2017年成为全球首个100TB规模Bigbench测试通过的大数据计算平台。
如今MaxCompute已经成为众多企业和机构算力的来源,为众安保险、墨迹天气、协鑫光伏、千寻位置、华大基因、人人车等各行业企业数字化转型提供了强大的算力。例如,墨迹天气使用MaxCompute后,开发效率提升超过5倍,存储和计算费用节省了70%,每天处理分析2TB的日志数据,更高效的赋能其个性化运营策略;此外,MaxCompute还支撑城市大脑自动指挥城市路口信号灯,并且成功应用于杭州、澳门、吉隆坡等国内外多个城市的交通治理。
从全球范围来看,拥有自研大数据计算平台的科技公司也只有阿里云、Google和亚马逊几家。但倘若当初没有王坚的坚持和远见,恐怕今天许多互联网公司,也难以享受到MaxCompute带来的红利。
MaxCompute产品官网 https://www.aliyun.com/product/odps
王坚十年前的坚持,才有了今天世界顶级大数据计算平台MaxCompute...相关推荐
- 王坚十年前的坚持,才有了今天世界顶级大数据计算平台MaxCompute
2019独角兽企业重金招聘Python工程师标准>>> 如果说十年前,王坚创立阿里云让云计算在国内得到了普及,那么王坚带领团队自主研发的大数据计算平台MaxCompute则推动大数据 ...
- Splunk高管:中国才有真正意义的大数据
文章讲的是Splunk高管:中国才有真正意义的大数据,在新兴大数据市场中,Splunk是典型的代表.它是第一家上市的大数据公司,也是第一家以机器数据分析为使命的公司.所谓机器数据,是由网站.应用程序. ...
- 【无标题】2023第十五届上海国际智慧城市、物联网、大数据博览会
@TOC2023AIOTE智博会 第十五届上海国际智慧城市.物联网.大数据博览会 The 15th Shanghai International Smart City, IOT, big data E ...
- 读懂这本书,才算读懂阿里大数据
2019年,是阿里巴巴第11个双11.众所周知,阿里的电商在线体系经过多年发展,可以支持峰值超过每秒50几万笔交易.但鲜有人知的是,海量的交易,创造了海量的数据,爆炸性的数据量激增,给狂欢过后的大数据 ...
- 医疗云计算才是真有料 大数据如何给中国医学史加一副药
2年前的2014世界互联网大会上,阿里当家人马云说,十年后最大的麻烦是健康,企业的机会也在这里.马云甚至预言:下一个能超过他的人,一定出现在健康产业里. 毋庸置疑,你一定感知到,全球气候变暖环境.臭氧 ...
- 大数据计算:如何仅用1.5KB内存为十亿对象计数
摘要:AddThis的数据分析副总监Matt Abrams在High Scalability上发表了一篇文章,介绍了他们公司如何应对大数据.Matt Abrams表示,AddThis仅仅用了1.5KB ...
- 我与CSDN的缘分——一年前的今天我甚至不知道什么叫大数据开发
本文正在参与CSDN<新程序员>有奖征文:<<新程序员>>杂志征文 文章目录 我与CSDN的缘分 复盘一年来的CSDN经历 取得的小小成绩 特别需要感谢的人 我个人 ...
- 首次探秘!双11奇迹背后的大数据力量,十年发展五部曲
第十个双11已圆满结束,但是技术的探索永不止步.阿里技术推出<十年牧码记>系列,邀请参与历年双11备战的核心技术大牛,一起回顾阿里技术的变迁. 每年双11,不仅仅是剁手族的狂欢节,更是数据 ...
- 阿里十年经验输出,大数据平台“数加”的前世今生
2016 年1月20日,在云栖大会上阿里云发布了一站式大数据平台"数加",该平台集合了阿里巴巴十年的大数据能力以及上万名工程师实战检验,该平台是一站式的解决方案,首批亮相20款产品 ...
最新文章
- Altium Designer类的使用
- @import注解_Spring 注解之@Import 注入的各种花活
- ACM入门之【最小生成树】
- 【学习笔记】线段树的数组大小下限及证明
- flink 1-个人理解
- 更改整个目录文件的所有权限
- UTF-8笔记170330
- 记录一次withRouter的实际应用场景
- java 新功能_Java 14的新功能
- android ndk gcc,Android NDK GCC似乎是铿锵的 - 它应该是这样吗?
- 二进制文件和普通文件(文本文件)区别
- Java任务调度之Quartz快速入门
- 电脑安装了多个版本的 Go,怎么优雅切换各个使用版本?
- Docker Engine在CentOS上的安装
- “通用大模型”趋势下,AI未来当如何?
- [Java] 1015. Reversible Primes (20)-PAT甲级
- 《Linux命令行与shell脚本编程大全 第3版》Shell脚本编程基础---36
- 快速上手数据挖掘之Solr5搜索引擎高级教程
- SVN 删除已提交的无用文件方法
- 一年中所有节日的排列顺序_中国传统节日有哪些 按顺序排列全部
热门文章
- C++拾取——使用stl标准库实现排序算法及评测
- Python实现决策树(Decision Tree)分类
- 正则表达式简介及在C++11中的简单使用
- 未获得计算机访问权限,如何获取文件夹的访问权限
- 河南信息工程学校计算机协会申请书,协会成立申请书范文15篇.docx
- 为什么博图中放置按下按钮无反应_如何更好的设计按钮
- kmeans及模型评估指标_模型评估常用指标
- 安卓如何实现多级结构树_数据结构-树(树基本实现C++)
- oracle 11g 逻辑备库,通过Oracle 11g 逻辑standby实现BI的需求
- Java项目:旅游网站管理系统设计和实现(java+springboot+jsp+mysql+spring)