CDH 报错：under replicated blocks

1.刚安装好CDH5.16.1集群（2个节点）出现了under replicated blocks错误，如下图

2.原因是CDH默认文件备份3份，而我们只有2节点，所以解决方法如下：

①集群增加一个新节点，步骤可见：《CDH5.16.1集群增加新节点》

②如果没有新机器增加节点，也可以使用hadoop的setrep命令将/目录下的文件备份数量修改为2

hadoop  fs -setrep -R -w 2 /

可以指定某些文件文件备份数量

hadoop dfs -setrep -w 2 /path/to/file

参考网址：https://community.hortonworks.com/questions/18819/how-to-fix-missing-and-under-replicated-blocks.html

以上。

转载于:https://www.cnblogs.com/chevin/p/10118607.html

CDH 报错：under replicated blocks相关推荐

CDH报错：主机的 NTP 服务未同步至任何远程服务器
CDH报错: 主机的 NTP 服务未同步至任何远程服务器主机的 NTP 服务未同步至任何远程服务器. 可以采取以下方式解决选择ntp时间服务器 : 10.0.61.4 Step1 : 进入linu ...
【错误记录】Android Studio 配置 AspectJ 报错 ( all buildscript {} blocks must appear before any plugins {} )
文章目录一.报错信息二.解决方案一.报错信息在 Android Studio 配置 AspectJ 报错 : Build file 'D:\002_Project\002_Android_Le ...
CDH报错解决：该主机与 Cloudera Manager Server 失去联系的时间过长。该主机未与 Host Monitor 建立联系。
文章目录概述问题描述解决方法概述说明下,qichu这里是由于集群资源有限,在最初配置如下: Master 172.20.10.100 Slave1 172.20.10.10 Slave2 ...
Hadoop报错：could only be replicated to 0 nodes, instead of 1
1 发现问题执行hadoop上传文件命令,报错could only be replicated to 0 nodes, instead of 1 2 方案1 原因:查看logs文件夹下datanod ...
重新编译CDH版本hadoop报错：Non-resolvable parent POM: Could not transfer artifact com.
重新编译CDH版本hadoop报错: Could not transfer artifact com.cloudera.cdh:cdh-root:pom:5.14.0 from/to cdh.repo ...
CDH集群执行任务报错:User xxx not found
1.基本情况 CDH集群, 节点分别为node1/node2/node3, 已安装Kerberos安全认证, 执行spark任务, 执行模式为spark on yarn 集群模式. 2.报错信息 ...
安装CDH Hive报错
在使用Cloudera Manager安装Hive的时候,报错如下: Failed to retrieve schema tables from Hive Metastore DB,Not suppo ...
【Spark报错】CDH的spark无法读取字段中含有特殊字符“-“的orc表mismatched input ‘-‘ expecting ‘:‘
背景故事先看报错信息: mismatched input '-' expecting ':' 报错的意思就是说,在这个表里面,字段名中存在特殊符号"-",无法解析报错. 这个问题 ...
CDH HIVE报错引发的一系列血案
今天偶尔发现一个CDH集群中的Hive MetaStore Server发生了异常,于是检查相关日志,具体日志为Hive MetaStore Server所在节点的/var/log/hive/hado ...

CDH 报错：under replicated blocks

CDH 报错：under replicated blocks相关推荐

最新文章

热门文章