课程介绍

本章知识针对分步式系统中的调度技术进行阐述,比较Hadoop MR,Yarn等系统见的区别,并指出阿里Fuxi系统在任务调度和资源调度时的处理方法,并对未来发展进行展望。

讲师简介:

陶阳宇,阿里巴巴高级专家,主要从事大型分布式系统和高并发系统的开发,在系统架构设计,性能优化等方面有丰富积累,参与研发了阿里云”飞天”分布式平台,支持5000节点大规模集群,主持研发了在线服务框架FuxiService、实时计算系统FuxiOnlinejob等多个线上产品,2015年带领团队在世界排序大赛SortBenchmark’2015中夺得冠军,打破两项世界纪录。曾在国际会议VLDB、CSDN等杂志发表过多篇技术文章,作为教师讲授清华大学大数据课程。

学习入口:请点击这里

课程目标

学习分步式系统中的调度技术,以及阿里Fuxi系统在任务调度和资源调度时的处理方法

适合人群

云计算开发者

分布式系统开发——调度技术相关推荐

  1. 分布式系统开发实战:分布式存储,分布式存储常用技术

    分布式存储 互联网每天产生数以亿计的数据,这些数据如何能够被正确地存储.解析.利用,是摆在每个数据公司面前的挑战.传统的关系型数据库,对于处理大规模的数据显得力不从心,由此以NoSQL为代表的分布式存 ...

  2. Java高级分布式系统开发技术 网易云课堂

    Java高级分布式系统开发技术 网易云课堂 授课大纲 第一章 分布式应用协调 1.1 互联网系统架构演进之路 1.1.1 集中式单体应用 1.1.2 系统拆分RPC阶段 1.1.3 微服务治理阶段 1 ...

  3. 分布式系统开发实战:分布式计算,分布式计算常用技术

    分布式计算 分布式计算就是将一个大的计算任务分解成多个小任务,然后分配给多台计算机分别计算,再上传运算结果后统一合并得出数据结论.本章详细介绍分布式计算. 分布式计算概述 在过去的20年里,互联网产生 ...

  4. 苏宁大数据离线任务开发调度平台实践:任务调度模块架构设计

    https://www.infoq.cn/article/xTvBg1_9iUL0z5Pjf0Os 本文是苏宁大数据离线任务开发调度平台实践系列文章之上篇,详解苏宁的任务调度模块. 目 录 1. 绪言 ...

  5. IT:后端进阶技术路线图(初级→中级→高级)、后端开发工程师(技术方向分类之后台业务开发/中间件/内核/分布式架构)基础知识简介、技术路线/技术趋势指南(如何选择自己的技术方向)之详细攻略

    IT:后端进阶技术路线图(初级→中级→高级).后端开发工程师(技术方向分类之后台业务开发/中间件/内核/分布式架构)基础知识简介.技术路线/技术趋势指南(如何选择自己的技术方向)之详细攻略 目录 后端 ...

  6. 五分钟学后端技术:如何学习分布式系统和相关技术

    转载自https://www.cnblogs.com/wetest/p/6806506.html 和https://www.cnblogs.com/dudu0614/p/8821811.html 什么 ...

  7. 开课吧:Java开发常用技术基础部分有哪些?

    在Java中,OOM是java.lang.OutOfMemoryError的缩写,简单来说是应用的内存用完了.而这个内存,指代的是JVM管理的内存模型. Java开发常用技术基础有如下几种: Priv ...

  8. 基于软总线的实时组件调度技术研究

    基于软总线的实时组件调度技术研究 摘要:首先分析组件软件工程模式比面向对象的开发模式更优越:接着讨论了组件软件工程的核心机制--软总线,提供组件通讯机制,保证组件的即插即用等功能:然后讨论了软总线中的 ...

  9. 网络流量监测与调度技术研究

    网络流量监测与调度技术研究 网络流量监测与调度技术研究 学习目标:流量监测 学习内容: 流量监测 流量监测的设计框架 框架一 框架二 框架三 申明: 未经许可,禁止以任何形式转载,若要引用,请标注链接 ...

最新文章

  1. [HAOI2015]按位或
  2. WF:要想绑到两个活动的属性值---依赖属性的定义方法
  3. 角色操作-角色添加流程分析
  4. 转 Python爬虫入门二之爬虫基础了解
  5. Redis -- 基础操作 [2]
  6. 【python】解决:TypeError: can't send non-None value to a just-started generator
  7. 自动填充html_第 11 篇:自动生成文章摘要
  8. 自定义的ViewGroup中添加自定义View 造成的无法显示问题(个人)
  9. 鹅厂优文 | ReactJS一点通
  10. ON DUPLICATE KEY UPDATE单个增加更新及批量增加更新的sql
  11. LinkCode 第k个排列
  12. 读书笔记—《雷达信号处理基础》第一章 雷达系统与信号处理概述
  13. cad墙线打断lisp_[求助]很多相交线快速打断 - AutoLISP/Visual LISP 编程技术 - CAD论坛 - 明经CAD社区 - Powered by Discuz!...
  14. 第十三届蓝桥杯省赛C++B组题解
  15. python小数乘法计算_小数乘法100道
  16. CCS编写F28335定时器0测试程序报错unresolved symbols remain error解决方法
  17. input tabIndex说明
  18. 电子商务毕业论文php,基于PHP的校园电子商务系统的设计与实现.doc
  19. vim中指定字符串的替换和删除
  20. 湖北武汉劳务员报考劳务员的工程劳务管理建筑七大员报考

热门文章

  1. Boosting for PRML
  2. 马尔可夫“折棍子”过程 Markovian Stick-breaking Process 简介
  3. UA SIE545 优化理论基础4 对偶理论简介4 求解对偶问题的割平面算法
  4. UA MATH566 统计理论5 假设检验:p值
  5. 超图数据集管理基本操作 - 隐藏系统字段和添加字段索引
  6. matlab利用作图法求圆周率
  7. 3D 投影矩阵学习1
  8. Kinect 动作识别组件概要设计
  9. 【转】Java基础知识整理
  10. 在学习django的时候