问题概述

[wangguowei@master sbin]$ start-all.sh
WARNING: Attempting to start all Apache Hadoop daemons as wangguowei in 10 seconds.
WARNING: This is not a recommended production deployment configuration.
WARNING: Use CTRL-C to abort.
Starting namenodes on [master]
master: Permission denied (publickey,gssapi-keyex,gssapi-with-mic,password).
Starting datanodes
Starting secondary namenodes [master]
master: Permission denied (publickey,gssapi-keyex,gssapi-with-mic,password).
2022-10-08 21:17:44,946 WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable
Starting resourcemanager
Starting nodemanagers

在启动了Hadoop集群后，发现master机的进程中并没有NameNode和2NN，在从机中的进程中有对应的3个资源：DataNode，jps，nodemanger

原因分析

根据报错原因分析
master: Permission denied (publickey,gssapi-keyex,gssapi-with-mic,password).

该问题是主机在对自己进行启动NN和2NN进程的时候，由于没有权限导致的，后面括号中也表示出了是由于公钥的问题

解决方法

在确定了主机可以和从机进行通讯没有问题后，仍然存在此问题，那么就是主机不能免密访问主机，需要对该步骤进行配置即可

cd ~/.sshchmod 600 authorized_keys

Hadoop主从模式通信图

Hadoop集群中master: Permission denied (publickey,gssapi-keyex,gssapi-with-mic,password).的解决和思路相关推荐

搭建hadoop 集群，出现 Permission denied (publickey,gssapi-keyex,gssapi-with-mic,password).
[注]1.出现这个原因在于在我们生成 ssh 免密登录的时候.没有把is_rsa.pub(公钥)追加到 authorized_keys文件后面. 2.理论上,设置成功的话输入 ssh hadoop1 ...
HADOOP实践101：在Hadoop集群中添加机器和删除机器
无论是在Hadoop集群中添加机器和删除机器,都无需停机,整个服务不中断. 本次操作之前,Hadoop的集群情况如下: HDFS的机器情况如下: MR的机器情况如下: 添加机器在集群的Master机 ...
《Hadoop集群与安全》一2.1　在Hadoop集群中配置操作系统
本节书摘来自华章出版社<Hadoop集群与安全>一书中的第2章,第2.1节,作者 (美)Danil Zburivsky Sudheesh Narayanan,更多章节内容可以访问云栖社区& ...
Hadoop集群中运行MapReduce程序错误记录
Exception in thread "main" java.lang.SecurityException: Invalid signature file digest for ...
Hadoop集群中添加硬盘
Hadoop工作节点扩展硬盘空间接到老板任务,Hadoop集群中硬盘空间不够用,要求加一台机器到Hadoop集群,并且每台机器在原有基础上加一块2T硬盘,老板给力啊,哈哈. 这些我把完成这项任务的步 ...
CentOS6上Hadoop集群中服务器cpu sys态异常的定位与解决
问题现象在zabbix系统中,对Hadoop集群的历史监控数据分析时,发现在执行大Job任务时,某些服务节点的cpu sys态很高: 具体以hadoop_A服务节点为例,在10:15-10:40这个 ...
Ubuntu下搭建第一台hadoop输入start-dfs.sh出现Permission denied (publickey,password)的问题
问题描述输入下方代码时: start-dfs.sh start-yarn.sh start-all.sh 会出现 localhost: 用户名@localhost: Permission denie ...
从Hadoop集群中移除一块磁盘的操作
2019独角兽企业重金招聘Python工程师标准>>> 背景由于历史原因,CDH的hadoop的每个DataNode节点下挂载了多个磁盘,后要对一些配置差的磁盘要用配置较好的新磁盘 ...
大数据Hadoop集群中常用的任务调度框架
在大数据的集群环境中,经常用到的任务调度框架有如下几个,根据公司的业务的需要选择适合自己的业务调度的框架, 调度框架anzkaban,crontab(Linux自带).zeus(Alibaba).Oo ...

Hadoop集群中master: Permission denied (publickey,gssapi-keyex,gssapi-with-mic,password).的解决和思路

问题概述

原因分析

解决方法

Hadoop主从模式通信图

Hadoop集群中master: Permission denied (publickey,gssapi-keyex,gssapi-with-mic,password).的解决和思路相关推荐

最新文章

热门文章