大数据集群管理方式分为手工方式(Apache hadoop)和工具方式(Ambari + hdp 和Cloudera Manger + CDH)。

手工部署呢,需配置太多参数,但是,好理解其原理,建议初学这样做,能学到很多。该方式啊,均得由用户执行,细节太多,切当设计多个组件时,用户须自己解决组件间版本兼容问题。

工具部署呢,比如Ambari或Cloudera Manger。(当前两大最主流的集群管理工具,前者是Hortonworks公司,后者是Cloudera公司)使用工具来,可以说是一键操作,难点都在工具Ambari或Cloudera Manger本身部署上。

比较项目 手工方式 工具方式
难易度 难,几乎不可能成功 简单,易行
兼容性 自己解决组件兼容性问题 自动安装兼容组件
组件支持数 支持全部组件 支持常用组件
优点 对组件和集群管理深刻 简单、容易、可行
缺点 太复杂,不可能成功 屏蔽太多细节,妨碍对组件理解
工具名 所属机构 开源性 社区支持性 易用性、稳定性 市场占有率
Cloudera Manger Cloudera 商用 不支持 易用、稳定
Ambari Hortonwork 开源 支持 较易用、较稳定 较高

常见的情况是,Cloudera Manger 去部署CDH, Ambari去部署HDP,当然,两者也可以互相,也可以去部署Apache Hadoop

Cloudera Manager安装之利用parcels方式安装3节点集群(包含最新稳定版本或指定版本的安装)(添加服务)
Ambari安装之部署3个节点的HA分布式集群

大数据领域两大最主流集群管理工具Ambari和Cloudera Manger相关推荐

  1. 集群监控:Ambari和Cloudera Manger

    运维过hadoop集群的人都应该清楚,hadoop生态从安装.配置到后期运维是一个非常艰辛的过程,一般来说安装hadoop可能就需要几天时间,运维一个小型集群同样需要几个人.ambari和cloude ...

  2. 关于大数据技术的演讲_好程序员大数据培训分享大数据的两大核心技术

    好程序员大数据培训分享大数据两大核心技术,今天小编给大家先分享一下大数据的两大核心技术,知己知彼才能百战不殆,学习大数据技术也是一样的道理,要先有一个清晰的了解,才能确保自己全身心的投入学习. Had ...

  3. 大数据领域十大必读书籍

    2017大数据领域十大必读书籍 chenjj 2017-07-12 大数据, 热门新闻 2,759 views 0 历史大浪淘沙经过5次信息革命,终于迎来大数据时代,给信息领域灌入了强劲的血液,催生了 ...

  4. 大数据之超级详细的KafKa集群搭建过程

    大数据 大数据之超级详细的KafKa集群搭建过程 文章目录 大数据 大数据之超级详细的KafKa集群搭建过程 前言 一.Kafka集群配置方法 1.1 将Kafka的安装包上传到虚拟机,并解压(三个虚 ...

  5. docker集群管理工具_太多选择:如何选择正确的工具来管理Docker集群

    docker集群管理工具 There are all kinds of ways to play the Docker game and, obviously, no one of them is g ...

  6. Redis核心解读–集群管理工具(Redis-sentinel)

    Redis-sentinel是Redis实例的监控管理.通知和实例失效备援服务,是Redis集群的管理工具.在一般的分布式中心节点数据库中,Redis-sentinel的作用是中心节点的工作,监控各个 ...

  7. Redis 集群搭建及集群管理工具

    目录 一.简介 二.架构图 三.搭建集群 3.1.下载 3.2.编译安装 3.3.配置文件修改 3.4.创建集群 四.集群管理工具redis-cli 4.1.查看集群信息 4.2.检查集群 4.3.修 ...

  8. Elasticsearch - 集群管理工具Head插件

    elasticsearch-head elasticsearch-head是一个elasticsearch的集群管理工具,它是完全由html5编写的独立网页程序,你可以通过插件把它集成到es.或直接下 ...

  9. kafka集群管理工具kafka-manager

    一.kafka-manager简介 kafka-manager是目前最受欢迎的kafka集群管理工具,最早由雅虎开源,用户可以在Web界面执行一些简单的集群管理操作.具体支持以下内容: 管理多个集群 ...

最新文章

  1. Beta 冲刺 (7/7)
  2. mysql 唯一性约束报错_怪异的MySQL Online DDL报错Duplicate entry
  3. 开机时进入 grub rescue>的解决方法
  4. 如何用python画数据图-python怎么对动态数据在同一张图上画出来
  5. 设计模式:单例模式之饿汉式
  6. SLAM-ch2-使用kdevelop创建helloWorld程序
  7. MapReduce自定义Partitioner
  8. spark之4:基础指南(源自官方文档)
  9. 如果删除github上项目的文件
  10. 合页损失,铰链损失_多点铰链损失功能 使用Python的线性代数
  11. 目标检测必看——RCNN是怎样融合了分类与回归,CNN与SVM
  12. 红旗liuxe5.0下vmware tools安装记录
  13. 海康(hikvision)录像机添加萤石(ezviz)摄像机常见问题(转)
  14. 京东QQ都没有的牛轰特效、两个ListView联动效果,不用stickyheaderlistview,
  15. 应用网易轻舟,德邦快递核心系统入选云原生应用十大优秀案例
  16. 调岗调薪带来的法律风险
  17. Java没有友联(函数)这个概念怎么办?
  18. 英特尔宣布推出新的“ Compute Stick”-一种笔式驱动器大小的PC
  19. 更换matlab版本需要注意事项,AMD 篇四:更换Matlab调用MKL库版本
  20. 矿视界译文:抗ASIC为何难以实现?看看RVN团队怎么说

热门文章

  1. Redis及其监控工具简介
  2. JRE发行版兼容性测试
  3. 东南大学计算机程光,东南大学网络空间安全学院常务副院长程光:加强网络空间安全学科建设 培养高质量多层次人才队伍...
  4. 2022-12-21 工作记录--React-老虎机动效
  5. 与时俱进的Java——《写给大忙人看的Java核心技术》读后感
  6. java中润lda,新浪微博背后的那些算法
  7. 利用微信公众号搭建天气查询
  8. 【idea】实用辅助插件(彩虹括号插件)
  9. 用CHKResume还原CHK文件
  10. 做一个支持图形界面的操作系统(上)