• 原生集群启动方式:

在Hadoop启动以后,namenode是通过SSH来启动和停止各个节点上的各种守护进程的,这就需要在节点之间执行指令的时候是不需要输入密码的方式,故我们需要配置SSH使用无密码公钥认证的方式。

  • Cloudera-Manager启动方式:

大多数安装过hadoop的人应该都配置过ssh免密登录,为啥需要免密登录,主要是因为 start-all.sh 这样的启动脚本,这个脚本会ssh登录到其他服务器上并执行hadoop-daemon.sh start namenode
hadoop-daemon.sh start zkfc 等命令启动相应的进程,如果不配置ssh免密登录,你需要输入每台机器的密码才能ssh登录到相应的机器上执行启动和关闭命令,这是相当繁琐的事情。

但cloudera-manager 的架构则不同,采用Server-Agent的结构,管理人员点击web页面的启动,重启,停止按钮,Server端会将指令发送到Agent端,Agent收到命令后启动相应的进程,这样根本就不要ssh登录服务器执行命令了。

Cloudera-Manager 的安装时 有两种选择 需要root账号 或者 用户具有免密执行sudo的权限 ,所以基于CM搭建的Hadoop集群可以不用使用免密登录,增加安全性。

Cloudera-Manager 与 原生集群 免密登录问题相关推荐

  1. 花式玩转Linux集群免密登录

    文章目录 1.前言 2.基础(两种方法前都要先ready) 3.方法一(常用) 4.方法二(简单) 5. `.ssh`文件下的`known_hosts`文件 1.前言   大数据集群往往需要多台机器构 ...

  2. linux环境下快速配置hadoop集群免密登录

    背景 在hadoop的日常使用过程中经常需要登录某些机器,如何更好的免密登录呢?这将为我们节省大量的时间 操作 假设你需要在A机器上免密登录B机器,那么你首先要确定B机器下是有秘钥文件的.如何确定是否 ...

  3. 使用Cloudera Manager搭建zookeeper集群及HDFS HA实战篇

    使用Cloudera Manager搭建zookeeper集群及HDFS HA实战篇 作者:尹正杰 版权声明:原创作品,谢绝转载!否则将追究法律责任. 一.使用Cloudera Manager搭建zo ...

  4. Linux相关配置 集群免密码登录配置

    Linux相关配置 集群免密码登录配置 实验目的要求: 1.完成VMware Workstation安装,会应用相关操作 2.掌握虚拟机中Linux CentOS 7.4操作系统安装 3.完成静态网络 ...

  5. Ubuntu设置SSH免密登录(不同于CentOS)

    Ubuntu设置SSH免密登录(不同于CentOS) 1.遇到的坑 之前一直在CentOS系统进行Hadoop开发,SSH免密登录配置过N次,今天在Ubuntu平台下设置免密登录遇到了坑: kylin ...

  6. Hadoop-2.8.0集群搭建、hadoop源码编译和安装、host配置、ssh免密登录、hadoop配置文件中的参数配置参数总结、hadoop集群测试,安装过程中的常见错误

    25. 集群搭建 25.1 HADOOP集群搭建 25.1.1集群简介 HADOOP集群具体来说包含两个集群:HDFS集群和YARN集群,两者逻辑上分离,但物理上常在一起 HDFS集群: 负责海量数据 ...

  7. centos服务器集群配置免密登录和文件传输

    centos服务器集群配置免密登录和文件传输 1.免密登录 (哪個用戶配置哪個用戶生效) 1. ssh-keygen -t ras # 连续回车三次得到生成的公钥私钥(文件夹 .ssh)======= ...

  8. Linux集群间免密登录

    免密登录原因 在平时运用计算机集群的时候,如若不设置免密登录,在启动平台的时候就会需要频繁的输入用户口令,这无疑会降低电脑运行速度,影响工作效率,所以才要设置免密登录 准备工作 1.准备三台虚拟机名字 ...

  9. 杨校老师课堂之集群内SSH免密登录功能配置

    SSH免密登录功能配置 1. 在主节点虚拟机内进行如下操作: [root@hadoop1 tmp]# ssh-keygen -t rsaGenerating public/private rsa ke ...

最新文章

  1. SGU 294 He's Circles (polay计数)
  2. filebeat+elk简单搭配
  3. mysql主主同步配置_MySQL 主主同步配置步骤
  4. 高性能队列——Disruptor
  5. 鼻塞用鼻喷剂-调研(成分+刺激性)
  6. 给大一师弟师妹的一些建议
  7. Sharding-Jdbc实现读写分离、分库分表,妙!
  8. linux VNC白屏,VNC使用及其常见问题解决方法
  9. 那年学过的Oracle笔记
  10. 出去转了一转,便利店......
  11. petshop 中的 cache机制
  12. Micro Sip 配置自己的freeswitch服务器地址
  13. 时差,不同国家之间的大概时差
  14. json发送数据加密方法_发送加密的电子邮件和安全邮件的最佳免费方法
  15. JS-表格行的动态删除和添加(insertRow deleteRow)
  16. FFmpeg+OpenCV 读取摄像头
  17. 如何绘制好看的大脑皮层图?wb_view +fun.gii格式操作
  18. 不能有比这个再靠谱的星座分析了
  19. 移动端click事件无反应或反应慢 touchend事件页面滑动时频繁触发
  20. ElasticSearch(项目中常用的ES)

热门文章

  1. JAVA入门级教学之(逻辑(布尔)运算符)
  2. JAVA入门级教学之(public class和class的区别)
  3. java 加密 数字_java 加密数字签名
  4. 小程序promise封装post请求_Promise封装微信小程序的Request请求
  5. 什么人适合学习Java编程?编程好学吗?
  6. java2组随机数的共通数_java随机数产生-指数分布 正态分布 等
  7. ssm java上传图片预览_ssm文件上传_上传图片
  8. 怎么调整字段长短_【芝士蛋糕怎么总烤不熟呢?】
  9. 深信服python面试题_(完整版)往年的深信服笔试题(齐全)
  10. python 编辑距离_最小编辑距离python