随着数据量的爆发,AI走上风口,典型的大数据业务场景下数据业务最通用的做法是:选用批计算的技术处理全量数据,采用流计算的技术处理实时增量数据。在生产环境中,用户通常采用批处理和流处理两套计算引擎来支持这两种场景。弊端就是需要写两套代码,维护两套引擎,毫无疑问,这种架构带来了额外的负担与成本。

面对全量数据和增量数据,能否用一套统一的大数据引擎技术来处理?

Apache Flink 被业界公认为最好的流计算引擎,其计算能力不仅仅局限于做流处理,而是一套兼具流、批、机器学习等多种计算功能的大数据引擎,用户只需根据业务逻辑开发一套代码,无论是全量数据还是增量数据,亦或者实时处理,一套方案即可全部支持。为了让大家更全面地了解 Apache Flink 背后的技术以及应用实践,今天,我们首次免费公开 Apache Flink 系列视频课程。

为什么要收藏 Apache Flink 系列课程?

2018年市场调查报告显示 Apache Flink 是2018年开源大数据生态中发展“最快”的引擎,相较于2017年增长了125% 。Flink 的社区生态在不断发展壮大,在中国,越来越多的互联网公司在生产环境中采用Flink解决实时计算、流计算、风控等问题,因而,学习 Flink 迫在眉睫。

此次免费公开课共分为9个课时,课程内容包含 Flink 的基础架构、应用场景、集群部署、运行机制、编程范式,为你系统地拆分讲解大数据计算开发引擎Flink。

1.1 为什么要学习 Apache Flink?

关键词:Flink 的重要性

课程开篇由阿里巴巴高级产品专家,实时计算产品团队负责人陈守元(巴真)开讲,从开设Apache Flink 系列课程的初衷、Apache Flink 的定义/架构/原理以及学前准备与学习方法与你分享如何高效学习 Flink 系列课程。

1.2 Flink 基本概念

关键词:Apache Flink PMC、有状态的流式处理

本节课程由 Apache Flink PMC、Ververica Software Engineer 戴资力与你探讨 Flink 作为有状态的流式处理引擎的核心概念应当如何理解,Flink 与其他大数据引擎的区别是什么?为什么要使用 Flink 以及有状态的流式处理引擎面临哪些挑战?

1.3 Flink 安装部署、环境配置及运行应用程序

关键词:开发 Flink 必经第一课

破解“知易行难”的方法是实战,第三节内容由阿里巴巴高级开发工程师沙晟阳带你从Flink开发环境的部署、配置、运行,以及不同模式的应用场景入手,示范如何快速正确安装应用Flink,并为你提供了实际应用中可能出现的问题与相应的解决方案。

1.4 DataStream API 编程

关键词:社区网红、深入浅出、通俗易懂

第四节课程开始涉及实际开发,DataStream API是Flink中较为核心的内容,本节由Apache Flink Committer、加拿大约克大学博士后崔星灿现身分享,课程将带你回顾 DataStream API 的概念、设计等基础知识,用示例展示 DataStreamAPI 实用开发技巧并剖析 DataStream API 的部分源码,方便大家快速上手。

1.5 客户端操作

关键词:客户端操作全面使用指南

第五节课程是客户端操作的全面使用指南,由阿里巴巴技术专家周凯波(宝牛)视频演示Flink 的客户端操作,从演示环境、界面、Flink 命令行以及 Flink 的5种任务提交方式进行示范,为后续开发打好基础。

1.6 Window & Time

关键词:Window的数据流程

第六节课程主要讲述Window 相关的概念,课程由阿里巴巴高级开发工程师邱从贤分享,从 Window的基本概念、核心组件以及如何处理乱序数据、迟到数据等讲解,并用代码带你一起梳理整个 Window 的数据流程。

1.7 状态管理与容错机制

关键词:必听课程

第七节课程由美团点评的研发工程师孙梦瑶分享,从状态管理的基本概念,Flink 状态的类型与使用示例、容错机制与故障恢复以及企业应当如何选择状态的类型和存储方式等方面分享并给出参考建议。

1.8 Flink Table API 编程

关键词:SQL 性能中非常核心的部分

Table API 是 Flink 的 SQL 性能中非常核心的部分,本节内容由 Apache Flink Contributor、阿里巴巴高级研发工程师程鹤群分享,对 TableAPI 基本概念、特性进行讲解的同时从 Table API 编程、WordCount 示例、Table API 操作用代码进行示范并分享了 Table API 的社区动态。

1.9 Flink SQL 编程

关键词:一年成为 Committer,“Flink学习博客第一站”

Apache Flink系列课程最后一节由Apache Flink Committer、阿里巴巴高级开发工程师伍翀(云邪)分享 Flink SQL 编程的相关内容,从如何在流上运行 SQL 查询、如何使用 SQL CLI 客户端、如何使用 SQL CLI 消费Kafka数据、如何用 SQL 将结果写入Kafka和ElasticSearch,带你入门 Flink SQL 编程。

你能收获什么?

实现从0到1了解 Flink 建立 Flink 的系统框架体系,为大数据引擎学习打下基础。

  • 通过实际案例,带你快速上手 Flink 这个分布式、高性能、高可用、高精确的为数据流应用而生的开源流式处理框架,带你领略计算之美。

  • 课程内容侧重于原理解析与基础应用,通过对Flink流计算的概念、技术原理、实践操作等详细解析,从最实际的应用场景出发引导你深入了解Flink,帮助你从 Flink 小白成长为 Flink 技术专家。

课程内容既包含 Flink 相关企业使用者的经验分享,又有 Flink 核心开发者的理论实践,既有广度分享亦有深度探讨,实乃大数据爱好者学习 Flink 的居家旅行必备良药!
——巴真(阿里巴巴高级产品专家)

从媒体的最新资讯推送,到购物狂欢的实时数据大屏,甚至城市级计算的工业大脑,实时计算已经应用到了多个生活、工作场景,随着业务的快速增长,企业对大数据处理的需求越来越高,Flink的应用也越来越广泛,相信在不久的将来,Flink将会成为各行业不同规模企业主流的大数据处理框架,并最终成为下一代大数据处理框架的标准。越早学习,越能抓住时代先机。

如何下载

观看系列课程

如何从小白进化成 Apache Flink 技术专家?9节基础课程免费公开!相关推荐

  1. Apache Flink 为什么能够成为新一代大数据计算引擎?

    众所周知,Apache Flink(以下简称 Flink)最早诞生于欧洲,2014 年由其创始团队捐赠给 Apache 基金会.如同其他诞生之初的项目,它新鲜,它开源,它适应了快速转的世界中更重视的速 ...

  2. Apache Flink流处理(一)

    Apache Flink是一个分布式流处理器,它使用直接且富有表现力的API来实现有状态的流处理应用程序.它以容错的方式高效地大规模运行此类应用程序.Flink于2014年4月加入Apache软件基金 ...

  3. 实时数仓入门训练营:基于 Apache Flink + Hologres 的实时推荐系统架构解析

    简介: <实时数仓入门训练营>由阿里云研究员王峰.阿里云资深技术专家金晓军.阿里云高级产品专家刘一鸣等实时计算 Flink 版和 Hologres 的多名技术/产品一线专家齐上阵,合力搭建 ...

  4. 阿里正式向 Apache Flink 贡献 Blink 源码

    导读: 如同我们去年12月在 Flink Forward China 峰会所约,阿里巴巴内部 Flink 版本 Blink 将于 2019 年 1 月底正式开源.今天,我们终于等到了这一刻. 阿里资深 ...

  5. 超燃!Apache Flink 全球顶级盛会强势来袭[视频+PPT]

    超燃!Apache Flink 全球顶级盛会强势来袭 摘要: 12月20日,北京国家会议中心.Flink Forward China 2018 强势来袭- [主会] 内容 <如何更好的参与贡献A ...

  6. 基于 Apache Flink + Hologres 的实时推荐系统架构解析

    简介:<实时数仓入门训练营>由阿里云研究员王峰.阿里云高级产品专家刘一鸣等实时计算 Flink 版和 Hologres 的多名技术/产品一线专家齐上阵,合力搭建此次训练营的课程体系,精心打 ...

  7. 终于等到你!阿里正式向 Apache Flink 贡献 Blink 源码

    阿里妹导读:如同我们去年12月在 Flink Forward China 峰会所约,阿里巴巴内部 Flink 版本 Blink 将于 2019 年 1 月底正式开源.今天,我们终于等到了这一刻. 阿里 ...

  8. flink checkpoint 恢复_Flink解析 | Apache Flink结合Kafka构建端到端的ExactlyOnce处理

    周凯波(宝牛) 阿里巴巴技术专家,四川大学硕士,2010年毕业后加入阿里搜索事业部,从事搜索离线平台的研发工作,参与将搜索后台数据处理架构从MapReduce到Flink的重构.目前在阿里计算平台事业 ...

  9. 高能预警!Apache Flink Meetup · 上海站返场啦

    精选30+云产品,助力企业轻松上云!>>> 近期,Flink 社区上线了一系列好玩有趣又干货十足的活动.错过的小伙伴可以看这里:如果您是 Flink 爱好者想快速上手入门,Flink ...

  10. 阿里云大学Apache Flink大数据学习笔记

    之前有看过一些基础的大数据课程,现在又回来发现这里的课程更新还是蛮快的,讲的内容干货也很多,继续学习一下,下面是一些主要内容说明. 地址:https://developer.aliyun.com/le ...

最新文章

  1. Linux查看文件夹大小的命令
  2. shell实例第2讲:获取随机字符串
  3. 20145328《网络对抗》Web基础
  4. 【转】pDc-SelectObject(pOldBrush)恢复画刷
  5. objective-c java_程序员转型指南 当Java遇见了Objective-C
  6. blocked by CORS policy,是否跨域?
  7. diy机器人图片 手绘纸箱_废物利用,她用几个纸箱让家里变成动物园,孩子回家乐坏了!收藏...
  8. mavean的依赖传递和排除依赖
  9. 从Spice Model到模拟IC设计的心路历程
  10. 酒店服务机器人或被用于长期偷窥旅客
  11. 华为HG8347R光猫 4台设备连接限制破解全过程
  12. PCB选料时的小技巧和参考网站+电解电容封装尺寸+稳压管型号
  13. tree.js实现3D效果,官网demo
  14. 推荐几款流行的开源报表工具
  15. 多张图片怎么合成gif动图?电脑如何将静图转换动图?
  16. Java 诊断工具Arthas初识、安装及试用
  17. 智能洗地机好不好用、洗地机和扫地机哪个实用?十大洗地机测评
  18. (三)Linux环境部署(Centos+Nginx+Tomcat+Mysql) - Nginx环境搭建
  19. 注册表的解释和一些简单的修改
  20. 长URL链接转短链接算法

热门文章

  1. Vue:文章新闻界面,点击上一篇下一篇界面不重新加载解决方案
  2. 南昌大学c语言程序设计,南昌大学C语言程序设计试卷C语言2.doc
  3. 重启报错_AFAB折旧计提报错:科目xxxxx要求一个成本会计分配 及重启问题
  4. MapReduce框架Hadoop应用(一)
  5. JNA-Java跨平台调用的利器
  6. jquery的函数介绍和使用
  7. 使用js事件绑定要调用函数的的三种方式
  8. 论文笔记_S2D.68_深度补全网络
  9. Java Web中界面之间传值的实现方法
  10. 深度强化学习笔记(一)——深度强化学习简述