藏不住了,Flink 未来发展的最新方向在这里!
距离 11 月 28 日 Flink Forward Asia 大会重磅开启还剩 3 天!之前我们详细介绍了围绕 Apache Flink 及其核心技术开设的五大专场,包括:企业实践、Apache 核心技术专场、开源大数据生态、实时数仓 、人工智能五大专题详细内容。
阿里巴巴集团首席技术官,阿里云智能总裁张建锋开场分享 《开放的云,数据的云,智能的云》 ,带来关于云智能时代的思考;
Apache Flink 创始人之一 Stephan Ewen 分享 Flink 未来发展最新方向;
Flink 中国社区发起人王峰总结回顾社区发展并将揭晓重磅发布;
戴尔科技集团副总裁 Srikanth Satya 与软件开发总监滕昱共同分享可靠的流式架构框架;
国际交通网络公司 Lyft 的徐赢和高立分享基于 ApacheFlink 的大规模准实时数据分析平台建设实践;
首届 Apache Flink 极客挑战赛赛程回顾及颁奖;
Stateful Functions: Building general-purpose Applications and Services on Apache Flink
本次分享将会为大家介绍 Apache Flink 中最新的“Stateful Functions”API。
近年来,在 Kubernetes 等技术的推动下,针对无状态计算的编排技术已经取得了长足进展。甚至可以说,无服务的计算和 FaaS(Functions-as-a-Service)正在颠覆我们构建和操作无状态应用的方式。然而它们都无法满足分布式有状态应用的需求。原因在于此类应用中的状态处理需要保持一致性,且状态化服务的交互在面对网络、节点或软件故障时需要保持可靠。能否良好地解决上述问题,将直接决定应用是能够做到正确且可伸缩,还是在发故障时会停止运行或产生错误的结果。
Stateful Functions API 以一种全新的方式解决了上述问题。它将流处理和 FaaS 的优势结合,为下一代事件驱动应用提供了一种强大的抽象。
Apache Flink Heading Towards A Unified Engine
王 峰
阿里巴巴资深技术专家,实时计算负责人
随着近些年的快速发展,Apache Flink 已经在实时计算领域成为用户的主流选择。但在实际生产场景中,用户往往同时需要在实时和离线两套环境中同时处理相同的业务逻辑,甚至在批流计算模型之间无缝切换,因此 Flink 也将继续向前发展,基于其流式计算内核优势,实现批流融合统一引擎,并与目前主流的数仓解决方案 Hive 进行无缝集成。
此外,随着 AI 场景的爆发,其对大数据计算能力也提出了更多的需求,因此 Flink 下一步也将加大对 AI 场景的支持,进一步完善其迭代计算能力,支持更多传统机器学习算法,与 TensorFlow/PyTorch 等深度学习框架更好的集成,支持 Python API,给用户提供一站式的大数据+AI 解决方案。
Reliable Streaming Infrastructure for the Enterprise
这个主题分享将介绍 Dell 科技集团是如何把流处理技术带入企业开发企业存储这个成熟但充满挑战的领域。对于不少嘉宾来说,“ToB”可能意味着完全不一样的思路和特性。
首先我们会分享为什么流处理技术对企业开发领域有着吸引力,其实不外乎以下两点:
“接近于0延迟的实时处理“能力可以让企业用户从已有的数据集中产生新的商业模式,带来新的经济效益。
可以获得一个统一的流/批处理统一的基础架构,降低客户在数据存储上的花费。几乎所有的企业用户对于在大数据存储上的额外开销都非常在意。
再者,对于企业开发领域,又有哪些关键点是吸引或是阻止他们采用新技术呢:
需要减低新技术的门槛,尽量兼任已有成熟的编程模型,这里面 FlinkSQL 就是一个很好的例子。
需要一个成熟的“开箱即用“的统一平台,适应混合云/多云的部署。并提供稳定性,安全性和易 InternalUse-Confidential 支持的特性。而这三点往往是决定”ToB“产品成败的关键所在。
最后,我们会带来一个真实的企业用例,用真实的测试结果来证明全新的流式处理架构的威力。
Lyft 基于 Apache Flink 的大规模准实时数据分析平台
徐赢博士是 Lyft 数据平台流媒体平台的技术领导(Technical Lead),目前主导准实时数据分析平台的架构开发。在 Lyft 之前,他曾在领英(Linkedin)以及 IBM 担任技术领导职位,主导领英跨数据中心数据库复制的上线,以及 IBM 高速数据传输技术的研发。
高立博士在 Lyft 的数据平台团队中工作,目前领导 Lyft 数据平台内的多个数据基础架构项目,包括实时数据仓库,自服务机器学习平台项目等。 曾在 Salesforce,Fitbit,Groupon 和其他初创公司担任关键技术领导职务。
▼ 关注 Ververica,Flink 爱你 ▼
你也「在看」吗?
藏不住了,Flink 未来发展的最新方向在这里!相关推荐
- 2021年全球及中国小家电行业发展现状分析,健康化和智能化产品将成为未来发展的重要方向「图」
一.小家电行业发展概述 小家电是指功率.体积较小的家电,是一种区别于彩电.空调.冰箱.洗衣机等大功率家电之外,应用于人们生活中的各个方面的产品.大家电与小家电主要区别如下: 大家电与小家电的区别 ...
- 从 Flink Forward Asia 2021,看Flink未来开启新篇章
简介:本文将对FFA Keynote议题作一些简单的归纳总结,感兴趣的小伙伴们可以在FFA官网[2]找到相关主题视频观看直播回放. 作者 | 梅源(Yuan Mei) 来源 | 阿里技术公众号 律回春 ...
- 中国工程院院士陈纯:链上链下数据协同技术是联盟链发展的重要方向(全文)...
"联盟链是目前中国最具实际应用前景的技术." 本文旨在传递更多市场信息,不构成任何投资建议. 火星财经APP(ID:hxcj24h)一线报道,10月11~13日,由中国计算机学会主 ...
- 英伟达与微软的合作里,藏着未来发展的关键词
前几日,英伟达宣布将与微软共同打造AI超级计算机.这台AI超级计算机将在微软Azure的超级计算基础设施运行,使用英伟达GPU.网络及全套AI软件.而英伟达将使用 Azure 的可扩展虚拟机实例来研究 ...
- 大数据行业怎么样?未来发展好么?
工信部测算到2025年中国大数据产业规模将突破3万亿元,全球互联网.大数据.云计算.数字孪生.元宇宙等数字技术加速创新趋势,探讨数字科技革命和产业变革的新机遇,聚焦大数据与实体经济.社会治理.民生服务 ...
- 聚焦基础科学 引领未来发展
作者:姜桂兴 来源:光明日报 当前,伴随着新一轮科技革命和产业变革的兴起,各国科技创新正在回到基础科学研究的根本问题上来.科学界意识到,技术创新背后的推动力是深层次的科学问题研究,只有聚焦基础问题研究 ...
- 中国电子用LCP树脂市场未来发展展望及十四五规划咨询建议报告2022-2028年版
中国电子用LCP树脂市场未来发展展望及十四五规划咨询建议报告2022-2028年版 +++HS++++HS+++HS+++HS++++HS++++HS++++HS++++HS+++HS+++HS+++ ...
- 中国健康体检行业行情动态及未来发展趋向分析报告2022年版
中国健康体检行业行情动态及未来发展趋向分析报告2022年版 [报告目录]: 正文目录 2 图表目录 19 第1章:中国健康体检行业发展环境分析 21 1.1 健康体检行业概 ...
- 全球及中国雪地摩托护目镜行业经营模式分析及未来发展动向分析报告2022-2027年版
2020年,全球雪地摩托护目镜市场规模达到了 百万美元,预计2027年可以达到 百万美元,年复合增长率(CAGR)为 % (2021-2027).中国市场规模增长快速,预计将由2020年的 百万美元增 ...
- 全球及中国成人病袍行业专项调研评估及未来发展趋势预测报告2021-2027年版
2020年,全球成人病袍市场规模达到了 百万美元,预计2027年可以达到 百万美元,年复合增长率(CAGR)为 % (2021-2027).中国市场规模增长快速,预计将由2020年的 百万美元增长到2 ...
最新文章
- 微型计算机2020年6月上,2020年1-6月全国微型计算机设备产量统计分析
- YYDS 的 IDEA插件,没装上的安排起来!
- 中国建筑节能行业投资动向分析及运营策略规划咨询报告2021-2027年
- 条理清晰的搭建SSH环境
- JQuery中的Deferred-详解和使用
- LeetCode - Easy - 14. Longest Common Prefix
- python的底层实现,Python封装底层实现原理详解(通俗易懂)
- MVC 3 基本操作增加修改
- 系统架构设计师软考考后回顾
- 机械设计基础课程设计详细步骤(说明书)
- 各层电子数排布规则_电子排布式书写规则
- F.dropout()与nn.dropout()
- python绘制语谱图(不掉包实现)
- futuretask java 并发请求_【Java并发】Runnable、Callable、Future、FutureTask
- java web实验_javaweb实验报告
- AI算法实现CSGO自动锁头辅助脚本
- python中的字体设置,pythontkinter设置界面字体样式_修改Python Tkinter中的默认字体...
- requests 用法
- 人工智能工程师学习路线/自然语言处理算法工程师
- 技术管理进阶——你了解成长的全貌吗?
热门文章
- 09. Django基础:URL反向解析
- ElementUI:tree组件背景色、鼠标hover悬浮背景色、选中背景色修改
- html倒计时样式,简单实现JS倒计时效果
- FNV摘要HASH算法实战
- My97DatePicker时间控件和编辑器的调用
- 算法笔记_面试题_17.二分法搜索_模板及示例十几道
- 论文翻译 | ORB-SLAM3:一个用于视觉、视觉惯性和多地图SLAM系统
- 论文笔记_S2D.45_ORBSLAM-Atlas: 一个稳健和精确的多建图系统
- 论文阅读笔记(一)——DESCENDING THROUGH A CROWDED VALLEY—BENCHMARKING DEEP LEARNING OPTIMIZERS
- AngularJS表单验证,手动验证或自动验证