Hadoop YARN学习之Hadoop框架演进历史简述(1)

1. Hadoop在其发展的过程中经历了多个阶段:

  • 阶段0:Ad Hoc集群时代

    • 标志着Hadoop的起源,集群以Ad Hoc、单用户方式建立
  • 阶段1:Hadoop on Demand(HOD)
    • 是进化过程中的下一个阶段,以一种通用系统的形式,在商用硬件组成的共享集群上提供和管理私有Hadoop MapReduce和HDFS实例。
  • 阶段2:共享计算集群的黎明
    • 始于大量Hadoop安装转向与共享HDFS实例一起的共享MapReduce集群。
  • 阶段3:YARN的出现
    • 用以解决以往架构的需求和缺陷

2. YARN的特性:

  • 可扩展性
  • 可维护性
  • 多租户
  • 位置感知
  • 高集群使用率
  • 安全和可审计的操作
  • 可靠性和可用性
  • 对编程模型多样的支持
  • 灵活的资源模型
  • 向后兼容

转载于:https://www.cnblogs.com/lanzhi/p/6467773.html

Hadoop YARN学习之Hadoop框架演进历史简述相关推荐

  1. Hadoop YARN学习之核心概念(2)

    Hadoop YARN学习之核心概念(2) 1. Hadoop 2.X YARN引入的新服务 1.1 新的ResourceManager纯碎作为资源调度器,是集群资源的唯一仲裁者: 1.2 用户应用程 ...

  2. 5.Hadoop的学习(Hadoop的配置(伪分布式的搭建)-1)

    1.Hadoop的配置 独立模式.伪分布式.完全分布式 2.安装完之后就已经是独立模式了. (1)在独立模式之下是没有守护进程的,可以输入命令 jps   会发现只有一个Jps,没有其他守护进程. ( ...

  3. 7.Hadoop的学习(Hadoop的配置(伪分布式的搭建)-3(启动守护进程))

    1.经过前面的两节,我们就可以使用HDFS文件系统了 2.首先要对文件系统进行格式化: 执行格式化的命令:   hadoop namenode -format 3. 启动守护进程 进入到        ...

  4. 6.Hadoop的学习(Hadoop的配置(伪分布式的搭建)-2(ssh登录远程主机,无口令提示))

    1.安装ssh 输入命令: which ssh 会发现Ubuntu已经自带了ssh,但是这个是不行的,我们还是要从新下载的. 执行命令:sudo apt-get install ssh 安装完成之后, ...

  5. Hadoop家族学习路线图--转载

    原文地址:http://blog.fens.me/hadoop-family-roadmap/ Sep 6, 2013 Tags: Hadoophadoop familyroadmap Comment ...

  6. Hadoop的学习路线图

    目录: .1.Hadoop家族产品 2.Hadoop家族学习路线图 Hadoop家族产品 截止到2013年,根据cloudera的统计,Hadoop家族产品已经达到20个! 接下来,我把这20个产品, ...

  7. 大数据入门之Hadoop基础学习

    前言 目前人工智能和大数据火热,使用的场景也越来越广,日常开发中前端同学也逐渐接触了更多与大数据相关的开发需求.因此对大数据知识也有必要进行一些学习理解 基础概念 大数据的本质 一.数据的存储:分布式 ...

  8. [转]Hadoop家族学习路线图

    Hadoop家族学习路线图 Hadoop家族系列文章,主要介绍Hadoop家族产品,常用的项目包括Hadoop, Hive, Pig, HBase, Sqoop, Mahout, Zookeeper, ...

  9. 大数据学习心得--hadoop框架

    前言 这是本人第一次写博客,技术不够,不敢妄谈一些太过前沿的技术的东西,想简单写写自己学过的东西,就当温故而知新了.本篇便以hadoop框架为主题来写点东西.众所周知,hadoop框架出现已久,had ...

最新文章

  1. 【设计模式】 面向对象六大设计原则
  2. 2 - Hexo + GitHub 搭建博客
  3. python中nameerror怎么处理_Python 运行报错NameError出现原因,怎么解决
  4. js中的引用类型-object
  5. 支付宝也崩溃,中心化支付体系尚能饭否?
  6. ue4账号注册不了_英雄联盟手游拳头账号注册
  7. go interface 转 string_深入理解Go的interface内部执行原理
  8. Linux入门之常用命令(10)软连接 硬链接
  9. 上帝掷骰子吗--量子物理史话
  10. VS2017内使用Coin3d第三方库的配置方法(含库与案例)
  11. 计算机专业考研电路原理,2016年南开大学综合基础课(模拟电路、数字电路、计算机原理)考研试题.pdf...
  12. linux localhost发邮件失败,测试邮件系统:telnet localhost 25时的问题~
  13. 存储 - emmc ufs nvme
  14. 领导力的21个法则-盖子法则
  15. 最近3年股息率最高排名
  16. mangodb 高频数据_MongoDB和数据流:实现一个MongoDB Kafka消费者
  17. 【C++】在 Visual Studio 调试器中指定符号 (.pdb) 和源文件(转载自RSS翻译)
  18. 用javascript分类刷leetcode4.贪心(图文视频讲解)
  19. 计算机培训ppt教案,课件制作的教案
  20. nokvm可以虚拟nat服务器吗,魔方财务系统 / 对接NOKVM云系统

热门文章

  1. HDLBits 系列(36)Arbitration circuit implemented by FSM
  2. awk 抓取文件子集
  3. python 2/3 joblib.dump() 和 joblib.load()
  4. Docker学习笔记 — Docker私有仓库搭建
  5. cocoapods 终极方案
  6. import javax.servlet 出错(真的很管用)
  7. Eclipse Tomcat的一些基本配置
  8. golang中slice切片的修改操作
  9. centos 6.4 更新163源
  10. 添加类iOS cocos2d 2游戏开发实战(第3版)