HDFS块丢失集群一直处于安全模式解决办法

今天在集群运行的时候突然断电了，服务器重启后，发现提交yarn任务一直报hdfs处于安全模式的错，然后查看hdfs状态，果真丢失两个数据块，导致块数量达不到99.9%。

解决方法

首先退出hdfs namenode safe mode

 hadoop dfsadmin -safemode leave

查看集群块状态

 hadoop fsck /

将丢失的块全部删除（必须退出安全模式才能执行）

 hdfs fsck  /  -delete          //此方式会将丢失的块全部删除

此时再查看hdfs块状态，已经正常了。（也可以重启集群测试）

参考：https://www.jianshu.com/p/0b41ab357452?from=singlemessage

HDFS块丢失集群一直处于安全模式解决办法相关推荐

Hadoop集群的安全模式
基本语法集群处于安全模式,不能执行重要操作(写操作).集群启动完成后,自动退出安全模式. bin/hdfs dfsadmin -safemode get //(功能描述:查看安全模式状态) bin/ ...
第二节HDFS完全分布式集群搭建与配置及常见问题总结
提示:此文章内容超级全面和详细文章目录前言一.HDFS完全分布式集群是什么? 二.HDFS完全分布式集群搭建与配置 1.HDFS完全分布式集群搭建库 2.HDFS完全分布式集群搭建配置 HDFS ...
无线网卡丢失的两个奇葩解决办法
无线网卡丢失的两个奇葩解决办法昨天开始自己的笔记本 (ThinkPad E430) 就显示没有无线网卡了.360wifi 无法使用,无法发现无线网络.试图重装了驱动,重启电脑数次.依然无果,最后在网 ...
oracle数据库报错代码,【案例】Oracle数据库dbv检查坏块时报错代码：6106解决办法...
[案例]Oracle数据库dbv检查坏块时报错代码:6106解决办法时间:2016-10-24 21:02 来源:Oracle研究中心作者:HTZ 点击: 次天萃荷净 Oracle研 ...
Word启动时进入“安全模式”解决办法
Word启动时进入"安全模式"解决办法有这样的情况,你正在编辑一份word文档,很happy,突然之间断电了,word根本没来得及保存,当下次启动word时,就发现word文件出 ...
非常不错 Hadoop 的HDFS （Hadoop集群（第8期）_HDFS初探之旅）
1.HDFS简介 HDFS(Hadoop Distributed File System)是Hadoop项目的核心子项目,是分布式计算中数据存储管理的基础,是基于流数据模式访问和处理超大文件的需求而开 ...
第10章-管理Hadoop集群-hadoop 安全模式相关知识点
为什么80%的码农都做不了架构师?>>> 1.namenode启动时,namenode节点都做了哪些动作?fsimage和edits有什么变化? 2.namenode什么时候开 ...
HDFS高可用集群中NameNode无法启动——解决方案
我是在刚搭建好HDFS高可用后,发现存在一台NamNode节点无法启动,但该节点上的DataNode仍可正常运行.其它的NameNode在正常运行. 问题可能是由多个NameNode上的元数据信息不一 ...
集群部署中解决定时任务重复执行的问题-redis分布式锁应用
背景描述有小伙伴私信我,关于存在定时任务的项目在集群环境下部署如何解决重复执行的问题,PS:定时任务没有单独拆分. 概述:之前的项目都是单机器部署,所以定时任务不会重复消费,只会执行一次.而在集群环 ...

HDFS块丢失集群一直处于安全模式解决办法

HDFS块丢失集群一直处于安全模式解决办法

解决方法

HDFS块丢失集群一直处于安全模式解决办法相关推荐

最新文章

热门文章