多次进行hdfs namenode -format命令时，启动DataNode自动死亡的原因

1.安装环境，三个节点，在配置的时候不小心忘记配置slaves节点，导致，进行2次 namenode -format

2.进行start-dfs.sh命令时，发现主节点可以启动，但是其他两个从节点，启动以后，立刻死亡，yarn是可以正常启动的，所以定位，问题应该是出在hdfs的格式化问题上

3.原因是我们每次格式化的时候，会产生这个文件夹/tmp/hadoop-hadoop/

4.我们可以将这个文件夹删除，这里注意！！每个节点上都要删除

5.我们使用命令：$ bin/hdfs namenode -format，从新进行格式化，会发现，所有的节点上又会产生这个文件夹：/tmp/hadoop-hadoop/

6.这是我们：start-dfs.sh启动，其他结点DataNode正常启动。

多次进行hdfs namenode -format命令时，启动DataNode自动死亡的原因相关推荐

hdfs namenode -format　初始化创建不了目录的问题
Hadoop格式化namenode错误:java.io.IOException: Cannot create directory hdfs namenode -format 初始化创建不了目录的问题, ...
Hadoop搭建集群中输入hdfs namenode -format格式化节点时，提示：hdfs: command not found 解决办法
分析原因: hadoop的安装路径没有加入到当前路径中解决办法: 方法1: 进入hadoop的安装目录,在执行hadoop命令时在前面加上:./bin ./sbin 方法2: 进入/etc/prof ...
namenode -format时org.apache.hadoop.ipc.Client:Retrying connect to serverAlready tried time(s)解决方案
大家好,我是爱编程的喵喵.双985硕士毕业,现担任全栈工程师一职,热衷于将数据思维应用到工作与生活中.从事机器学习以及相关的前后端开发工作.曾在阿里云.科大讯飞.CCF等比赛获得多次Top名次.现 ...
hadoop-HA集群搭建，启动DataNode，检测启动状态，执行HDFS命令，启动YARN，HDFS权限配置，C++客户端编程，常见错误
本篇博文为整理网络上Hadoop-HA搭建后出来的博客,参考网址为:http://blog.chinaunix.net/uid-196700-id-5751309.html 3. 部署 3.1. 机器 ...
HDFS Namenode启动过程
Namenode保存文件系统元数据镜像,namenode在内存及磁盘(fsimage和editslog)上分别存在一份元数据镜像文件,内存中元数据镜像保证了hdfs文件系统文件访问效率,磁盘上的元数据 ...
hdfs入门——常用命令
2019独角兽企业重金招聘Python工程师标准>>> hadoop fs:使用面最广,可以操作任何文件系统. hadoop dfs与hdfs dfs:只能操作HDFS文件系统相关( ...
hdfs dfs -put_通过HDFS中的`hdfs dfs -put`命令行上传文件时，如何设置一个文件的复制因子？...
hdfs dfs -put When uploading a file by the hdfs dfs -put command line in HDFS, how to set a replicat ...
2021年大数据Hadoop（八）：HDFS的Shell命令行使用
2021大数据领域优质创作博客,带你从入门到精通,该博客每天更新,逐渐完善大数据各个知识体系的文章,帮助大家更高效学习. 有对大数据感兴趣的可以关注微信公众号:三帮大数据目录 HDFS的Shell命 ...
实验二 HDFS的Shell命令操作，和HDFS的API操作
文章目录实验目的一. 实验原理二.实验准备实验内容步骤项目1 HDFS常见命令练习列出HDFS当前用户家目录下的文件及文件夹: 列出HDFS文件下名为directory的文件夹中的文件: ...
Hadoop之HDFS常用Shell命令
Hadoop之HDFS常用Shell命令启动Hadoop集群 sbin/start-dfs.shsbin/start-yarn.sh -help:输出这个命令参数 hadoop fs -help r ...

多次进行hdfs namenode -format命令时，启动DataNode自动死亡的原因

多次进行hdfs namenode -format命令时，启动DataNode自动死亡的原因相关推荐

最新文章

热门文章