大数据领域两大最主流集群管理工具Ambari和Cloudera Manger
大数据集群管理方式分为手工方式(Apache hadoop)和工具方式(Ambari + hdp 和Cloudera Manger + CDH)。
手工部署呢,需配置太多参数,但是,好理解其原理,建议初学这样做,能学到很多。该方式啊,均得由用户执行,细节太多,切当设计多个组件时,用户须自己解决组件间版本兼容问题。
工具部署呢,比如Ambari或Cloudera Manger。(当前两大最主流的集群管理工具,前者是Hortonworks公司,后者是Cloudera公司)使用工具来,可以说是一键操作,难点都在工具Ambari或Cloudera Manger本身部署上。
比较项目 | 手工方式 | 工具方式 |
---|---|---|
难易度 | 难,几乎不可能成功 | 简单,易行 |
兼容性 | 自己解决组件兼容性问题 | 自动安装兼容组件 |
组件支持数 | 支持全部组件 | 支持常用组件 |
优点 | 对组件和集群管理深刻 | 简单、容易、可行 |
缺点 | 太复杂,不可能成功 | 屏蔽太多细节,妨碍对组件理解 |
工具名 | 所属机构 | 开源性 | 社区支持性 | 易用性、稳定性 | 市场占有率 |
---|---|---|---|---|---|
Cloudera Manger | Cloudera | 商用 | 不支持 | 易用、稳定 | 高 |
Ambari | Hortonwork | 开源 | 支持 | 较易用、较稳定 | 较高 |
常见的情况是,Cloudera Manger 去部署CDH, Ambari去部署HDP,当然,两者也可以互相,也可以去部署Apache Hadoop
Cloudera Manager安装之利用parcels方式安装3节点集群(包含最新稳定版本或指定版本的安装)(添加服务)
Ambari安装之部署3个节点的HA分布式集群
大数据领域两大最主流集群管理工具Ambari和Cloudera Manger相关推荐
- 集群监控:Ambari和Cloudera Manger
运维过hadoop集群的人都应该清楚,hadoop生态从安装.配置到后期运维是一个非常艰辛的过程,一般来说安装hadoop可能就需要几天时间,运维一个小型集群同样需要几个人.ambari和cloude ...
- 关于大数据技术的演讲_好程序员大数据培训分享大数据的两大核心技术
好程序员大数据培训分享大数据两大核心技术,今天小编给大家先分享一下大数据的两大核心技术,知己知彼才能百战不殆,学习大数据技术也是一样的道理,要先有一个清晰的了解,才能确保自己全身心的投入学习. Had ...
- 大数据领域十大必读书籍
2017大数据领域十大必读书籍 chenjj 2017-07-12 大数据, 热门新闻 2,759 views 0 历史大浪淘沙经过5次信息革命,终于迎来大数据时代,给信息领域灌入了强劲的血液,催生了 ...
- 大数据之超级详细的KafKa集群搭建过程
大数据 大数据之超级详细的KafKa集群搭建过程 文章目录 大数据 大数据之超级详细的KafKa集群搭建过程 前言 一.Kafka集群配置方法 1.1 将Kafka的安装包上传到虚拟机,并解压(三个虚 ...
- docker集群管理工具_太多选择:如何选择正确的工具来管理Docker集群
docker集群管理工具 There are all kinds of ways to play the Docker game and, obviously, no one of them is g ...
- Redis核心解读–集群管理工具(Redis-sentinel)
Redis-sentinel是Redis实例的监控管理.通知和实例失效备援服务,是Redis集群的管理工具.在一般的分布式中心节点数据库中,Redis-sentinel的作用是中心节点的工作,监控各个 ...
- Redis 集群搭建及集群管理工具
目录 一.简介 二.架构图 三.搭建集群 3.1.下载 3.2.编译安装 3.3.配置文件修改 3.4.创建集群 四.集群管理工具redis-cli 4.1.查看集群信息 4.2.检查集群 4.3.修 ...
- Elasticsearch - 集群管理工具Head插件
elasticsearch-head elasticsearch-head是一个elasticsearch的集群管理工具,它是完全由html5编写的独立网页程序,你可以通过插件把它集成到es.或直接下 ...
- kafka集群管理工具kafka-manager
一.kafka-manager简介 kafka-manager是目前最受欢迎的kafka集群管理工具,最早由雅虎开源,用户可以在Web界面执行一些简单的集群管理操作.具体支持以下内容: 管理多个集群 ...
最新文章
- Beta 冲刺 (7/7)
- mysql 唯一性约束报错_怪异的MySQL Online DDL报错Duplicate entry
- 开机时进入 grub rescue>的解决方法
- 如何用python画数据图-python怎么对动态数据在同一张图上画出来
- 设计模式:单例模式之饿汉式
- SLAM-ch2-使用kdevelop创建helloWorld程序
- MapReduce自定义Partitioner
- spark之4:基础指南(源自官方文档)
- 如果删除github上项目的文件
- 合页损失,铰链损失_多点铰链损失功能 使用Python的线性代数
- 目标检测必看——RCNN是怎样融合了分类与回归,CNN与SVM
- 红旗liuxe5.0下vmware tools安装记录
- 海康(hikvision)录像机添加萤石(ezviz)摄像机常见问题(转)
- 京东QQ都没有的牛轰特效、两个ListView联动效果,不用stickyheaderlistview,
- 应用网易轻舟,德邦快递核心系统入选云原生应用十大优秀案例
- 调岗调薪带来的法律风险
- Java没有友联(函数)这个概念怎么办?
- 英特尔宣布推出新的“ Compute Stick”-一种笔式驱动器大小的PC
- 更换matlab版本需要注意事项,AMD 篇四:更换Matlab调用MKL库版本
- 矿视界译文:抗ASIC为何难以实现?看看RVN团队怎么说