【Hadoop 】Hadoop datanode启动不起来的原因总结

1、多次格式化导致Namenode和Datanode对应信息不一致

下图为 Namenode 的 ${dfs.name.dir}/current/VERSION 信息

下图为 Datanode 的 ${dfs.name.dir}/current/VERSION 信息

下图为 Datanode 的 ${dfs.name.dir}/current/blockpool池ID/current/VERSION 信息

解决方法：将Namenode的 clusterID 、namespaceID 修改为和 Datanode的 clusterID 、namespaceID一致即可（推荐）

2、Datanode所在节点hosts文件配置错误

解决方法：因为hosts文件配置错误，Namenode接收不了Datanode的心跳，所以修改hosts文件，正确配置节点间的映射关系即可

3、Datanode突然不堪重负宕机掉

解决方法：在datanode宕机的节点执行 hadoop-daemon.sh start datanode 命令重启即可

4、Slaves文件配置错误

解决方法：在slaves文件中正确配置datanode节点名即可

5、多个DataNodeUUID一致

解决方法：修改重复的

【Hadoop 】Hadoop datanode启动不起来的原因总结相关推荐

启动Hadoop时候datanode没有启动的原因及解决方案
启动Hadoop时候datanode没有启动的原因及解决方案参考文章: (1)启动Hadoop时候datanode没有启动的原因及解决方案 (2)https://www.cnblogs.com/ya ...
hadoop启动后某些节点未启动，hadoop主节点无法启动datanode DataNode
项目场景: hadoop集群搭建,主节点hadoop01无法启动datanode 要注意的是:它们同时也都是DataNode节点. 问题描述: 执行查看出错日志: cd /home/hadoop/ap ...
Apache Hadoop 答疑：解决 Apache Hadoop 启动时 DataNode 启动异常的问题
文章目录前言一.启动 HDFS 并显示当前所有 Java 进程二.DataNode 启动异常场景描述三.DataNode 启动异常解决方式四.Web 界面检查 Hadoop 信息总结前言 ...
Hadoop DataNode启动之heartbeat
heartbeat是DN与NN之间的一种通信机制,DN会通过它向NN汇报自身是否存活,当然还有其他信息,当一个DN超过一段时间没发送心跳信号,则NN认为该节点已失效,会对该节点上的数据进行修复,节点退 ...
CC00055.hadoop——|HadoopMapReduce.V27|——|Hadoop.v27|源码剖析|DataNode启动流程|
一.[源码剖析之DataNode启动流程] :DataNode 启动流程 ### --- datanode的Main Class是DataNode,先找到DataNode.main()public c ...
Hadoop之DataNode工作机制
Hadoop之DataNode工作机制目录 DataNode工作机制数据完整性掉线时限参数设置 1. DataNode工作机制 DataNode工作机制如下图一个数据块在DataNode上以文 ...
Hadoop集群启动、初体验
1．启动方式要启动Hadoop集群,需要启动HDFS和YARN两个集群. 注意:首次启动HDFS时,必须对其进行格式化操作.本质上是一些清理和准备工作,因为此时的HDFS在物理上还是不存在的. h ...
Hadoop HA HDFS启动 NameNode启动失败解析
今天也要努力学习作者大哥:me2xp https://www.linuxidc.com/Linux/2016-03/129437.htm 看日志真的很重要!!!!!!!!!! 一.问题描述 HA按 ...
Hadoop配置datanode
配置完成之后才想起来要写个总结,没有办法及时配图,下次配置的时候补上. 配置时参考了 http://blog.csdn.net/hguisu/article/details/7237395 很详细, ...