文章目录

  • 4.常见错误及解决方案
  • 1)防火墙没关闭、或者没有启动YARN
  • 7)不识别主机名称
  • 8)DataNode和NameNode进程同时只能工作一个。
  • 9)执行命令不生效,粘贴Word中命令时,遇到-和长–没区分开。导致命令失效
  • 10)jps发现进程已经没有,但是重新启动集群,提示进程已经开启。
  • 11)jps不生效
  • 12)8088端口连接不上
  • 13)web端删除没有权限,配置HDFS网页登录使用的静态用户为summer`Permission denied: user=dr.who, access=WRITE, inode="/":summer:supergroup:drwxr-xr-x`

4.常见错误及解决方案

1)防火墙没关闭、或者没有启动YARN

INFO client.RMProxy: Connecting to ResourceManager at hadoop108/192.168.10.108:8032
2)主机名称配置错误
3)IP地址配置错误
4)ssh没有配置好
5)root用户和summer两个用户启动集群不统一
6)配置文件修改不细心

7)不识别主机名称

java.net.UnknownHostException: hadoop102: hadoop102at java.net.InetAddress.getLocalHost(InetAddress.java:1475)at org.apache.hadoop.mapreduce.JobSubmitter.submitJobInternal(JobSubmitter.java:146)at org.apache.hadoop.mapreduce.Job$10.run(Job.java:1290)at org.apache.hadoop.mapreduce.Job$10.run(Job.java:1287)at java.security.AccessController.doPrivileged(Native Method)
at javax.security.auth.Subject.doAs(Subject.java:415)

解决办法:
(1)在/etc/hosts文件中添加192.168.159.102 hadoop102
(2)主机名称不要起hadoop hadoop000等特殊名称

8)DataNode和NameNode进程同时只能工作一个。

9)执行命令不生效,粘贴Word中命令时,遇到-和长–没区分开。导致命令失效

解决办法:尽量不要粘贴Word中代码。

10)jps发现进程已经没有,但是重新启动集群,提示进程已经开启。

原因是在Linux的根目录下/tmp目录中存在启动的进程临时文件,将集群相关进程删除掉,再重新启动集群。

11)jps不生效

原因:全局变量hadoop java没有生效。解决办法:需要source /etc/profile文件。

12)8088端口连接不上

[summer@hadoop102 ~]$ cat /etc/hosts
注释掉如下代码
#127.0.0.1 localhost localhost.localdomain localhost4 localhost4.localdomain4
#::1 hadoop102

13)web端删除没有权限,配置HDFS网页登录使用的静态用户为summerPermission denied: user=dr.who, access=WRITE, inode="/":summer:supergroup:drwxr-xr-x


解决办法
之前配置core-site.xml的时候少配置了一个,现在加上去就行了

  • [summer@hadoop102 hadoop]$ vim core-site.xml

文件内容如下:

   <!-- 配置HDFS网页登录使用的静态用户为summer--><property><name>hadoop.http.staticuser.user</name><value>summer</value></property>

然后分发下

  • [summer@hadoop102 hadoop]$ xsync core-site.xml

然后重启一下yarn和hdfs

  • [summer@hadoop102 hadoop]$ myhadoop.sh stop
  • [summer@hadoop102 hadoop]$ jpsall
  • [summer@hadoop102 hadoop]$ myhadoop.sh start

这几个都是写的脚本,具体的可看我之前写的https://blog.csdn.net/Redamancy06/article/details/126234179?spm=1001.2014.3001.5502

然后再去删这里的testoutput


完成!

Hadoop常见错误及解决方案、Permission denied: user=dr.who, access=WRITE, inode=“/“:summer:supergroup:drwxr-xr-x相关推荐

  1. Hadoop创建文件夹出现Permission denied: user=dr.who, access=WRITE, inode=“/“:root:supergroup:drwxr-xr-x

    权限问题 hadoop fs -chmod 777 /

  2. Permission denied: user=dr.who, access=WRITE, inode=“/“:root:supergroup:drwxr-xr-x

    权限问题,修改后即可正常创建 hadoop fs -chmod 777 /

  3. Permission denied: user=dr.who, access=READ_EXECUTE, inode=/tmp:root:supergroup:drwx------

    今天在做Hadoop 分布式实例的时候遇到了这个错误:Permission denied: user=dr.who, access=READ_EXECUTE, inode="/tmp&quo ...

  4. Permission denied: user=dr.who, access=READ_EXECUTE, inode=/user/root:root:supergroup:drwx------

    问题: Permission denied: user=dr.who, access=READ_EXECUTE, inode="/user/root":root:supergrou ...

  5. Permission denied: user=dr.who, access=READ_EXECUTE, inode=“/tmp“:root:super

    Permission denied: user=dr.who, access=READ_EXECUTE, inode="/tmp":root:super 解决办法:执行hdfs d ...

  6. Hadoop中的MapReduce框架原理、数据清洗(ETL)、MapReduce开发总结、常见错误及解决方案

    文章目录 13.MapReduce框架原理 13.7 数据清洗(ETL) 13.7.1 需求 13.7.1.1 输入数据 13.7.1.2 期望输出数据 13.7.2 需求分析 13.7.3实现代码 ...

  7. 大数据技术之Hadoop(Hadoop企业优化常见错误及解决方案)

    6.1 MapReduce 跑的慢的原因 6.2 MapReduce优化方法 MapReduce优化方法主要从六个方面考虑:数据输入.Map阶段.Reduce阶段.IO传输.数据倾斜问题和常用的调优参 ...

  8. 大数据常见错误及解决方案

    大数据常见错误及解决方案(转载) 1.用./bin/spark-shell启动spark时遇到异常:java.net.BindException: Can't assign requested add ...

  9. Hadoop常见异常及其解决方案

    1.Shell$ExitCodeException 现象:运行hadoop job时出现如下异常: 14/07/09 14:42:50 INFO mapreduce.Job: Task Id : at ...

最新文章

  1. ECMAScript Query实例
  2. 理解ROS话题---ROS学习第5篇
  3. 交换机的4种网络结构方式你知道是什么吗?
  4. You must supply a resourceID for a TextView
  5. return在c语言中是什么意思
  6. 功能测试代码python_如何使您的Python代码更具功能性
  7. 它打败了欧几里得空间,踹飞了数学怪物,成为全世界的焦点
  8. java 方法 示例_Java语言环境getDisplayCountry()方法与示例
  9. linux 标准输出流管道,初学Linux之标准 I/O 和管道
  10. 敏捷外包工程系列之一:序言(敏捷外包工程,敏捷开发,CMMI,软件外包,政府项目,银行项目,电信项目)...
  11. 电脑桌面隐藏文件如何恢复出来呢
  12. Redfish Data model (红鱼的资料模型)
  13. gentoo 修改键盘映射
  14. python中encode用法_Python中encode()方法的使用简介
  15. 经典上海弄堂线路攻略
  16. 使用python调整excel表格的行和列以及合并或拆分单元格
  17. 叮咚~ 你有一份令人心动的offer待查收【cv君独家内推】
  18. 利用arduino红外库遥控美的家用空调
  19. 优秀课程案例|如何用scratch画折线统计图
  20. Tesra超算网络AI训练的使用流程

热门文章

  1. php极简云网盘网页版源码,PHP极简云盘个人网盘源码 文件管理与共享系统 自适应手机端...
  2. 微商城如何借势618微信营销?5分钟完成活动策划案
  3. Android生命周期详解
  4. 红楼梦人物出场统计python_红楼梦有多少人物统计(一)
  5. git命令和遇见得 warning:
  6. 【NDN实验】ndnSIM 2.0: A new version of the NDN simulator for NS-3 全文翻译
  7. android 开发 python_用python语言开发android应用程序(1) - 格物致知的博客空间 - 中国移动开发者社区 - Powered by X-Space...
  8. 如何通过手机APP远程控制PLC
  9. 从零开始搭建博客Hexo-Node-Git搭建博客
  10. 什么是CSTC价值协议