Hadoop常见错误及解决方案、Permission denied: user=dr.who, access=WRITE, inode=“/“:summer:supergroup:drwxr-xr-x
文章目录
- 4.常见错误及解决方案
- 1)防火墙没关闭、或者没有启动YARN
- 7)不识别主机名称
- 8)DataNode和NameNode进程同时只能工作一个。
- 9)执行命令不生效,粘贴Word中命令时,遇到-和长–没区分开。导致命令失效
- 10)jps发现进程已经没有,但是重新启动集群,提示进程已经开启。
- 11)jps不生效
- 12)8088端口连接不上
- 13)web端删除没有权限,配置HDFS网页登录使用的静态用户为summer`Permission denied: user=dr.who, access=WRITE, inode="/":summer:supergroup:drwxr-xr-x`
4.常见错误及解决方案
1)防火墙没关闭、或者没有启动YARN
INFO client.RMProxy: Connecting to ResourceManager at hadoop108/192.168.10.108:8032
2)主机名称配置错误
3)IP地址配置错误
4)ssh没有配置好
5)root用户和summer两个用户启动集群不统一
6)配置文件修改不细心
7)不识别主机名称
java.net.UnknownHostException: hadoop102: hadoop102at java.net.InetAddress.getLocalHost(InetAddress.java:1475)at org.apache.hadoop.mapreduce.JobSubmitter.submitJobInternal(JobSubmitter.java:146)at org.apache.hadoop.mapreduce.Job$10.run(Job.java:1290)at org.apache.hadoop.mapreduce.Job$10.run(Job.java:1287)at java.security.AccessController.doPrivileged(Native Method)
at javax.security.auth.Subject.doAs(Subject.java:415)
解决办法:
(1)在/etc/hosts文件中添加192.168.159.102 hadoop102
(2)主机名称不要起hadoop hadoop000等特殊名称
8)DataNode和NameNode进程同时只能工作一个。
9)执行命令不生效,粘贴Word中命令时,遇到-和长–没区分开。导致命令失效
解决办法:尽量不要粘贴Word中代码。
10)jps发现进程已经没有,但是重新启动集群,提示进程已经开启。
原因是在Linux的根目录下/tmp目录中存在启动的进程临时文件,将集群相关进程删除掉,再重新启动集群。
11)jps不生效
原因:全局变量hadoop java没有生效。解决办法:需要source /etc/profile文件。
12)8088端口连接不上
[summer@hadoop102 ~]$ cat /etc/hosts
注释掉如下代码
#127.0.0.1 localhost localhost.localdomain localhost4 localhost4.localdomain4
#::1 hadoop102
13)web端删除没有权限,配置HDFS网页登录使用的静态用户为summerPermission denied: user=dr.who, access=WRITE, inode="/":summer:supergroup:drwxr-xr-x
解决办法
之前配置core-site.xml的时候少配置了一个,现在加上去就行了
- [summer@hadoop102 hadoop]$ vim core-site.xml
文件内容如下:
<!-- 配置HDFS网页登录使用的静态用户为summer--><property><name>hadoop.http.staticuser.user</name><value>summer</value></property>
然后分发下
- [summer@hadoop102 hadoop]$ xsync core-site.xml
然后重启一下yarn和hdfs
- [summer@hadoop102 hadoop]$ myhadoop.sh stop
- [summer@hadoop102 hadoop]$ jpsall
- [summer@hadoop102 hadoop]$ myhadoop.sh start
这几个都是写的脚本,具体的可看我之前写的https://blog.csdn.net/Redamancy06/article/details/126234179?spm=1001.2014.3001.5502
然后再去删这里的testoutput
完成!
Hadoop常见错误及解决方案、Permission denied: user=dr.who, access=WRITE, inode=“/“:summer:supergroup:drwxr-xr-x相关推荐
- Hadoop创建文件夹出现Permission denied: user=dr.who, access=WRITE, inode=“/“:root:supergroup:drwxr-xr-x
权限问题 hadoop fs -chmod 777 /
- Permission denied: user=dr.who, access=WRITE, inode=“/“:root:supergroup:drwxr-xr-x
权限问题,修改后即可正常创建 hadoop fs -chmod 777 /
- Permission denied: user=dr.who, access=READ_EXECUTE, inode=/tmp:root:supergroup:drwx------
今天在做Hadoop 分布式实例的时候遇到了这个错误:Permission denied: user=dr.who, access=READ_EXECUTE, inode="/tmp&quo ...
- Permission denied: user=dr.who, access=READ_EXECUTE, inode=/user/root:root:supergroup:drwx------
问题: Permission denied: user=dr.who, access=READ_EXECUTE, inode="/user/root":root:supergrou ...
- Permission denied: user=dr.who, access=READ_EXECUTE, inode=“/tmp“:root:super
Permission denied: user=dr.who, access=READ_EXECUTE, inode="/tmp":root:super 解决办法:执行hdfs d ...
- Hadoop中的MapReduce框架原理、数据清洗(ETL)、MapReduce开发总结、常见错误及解决方案
文章目录 13.MapReduce框架原理 13.7 数据清洗(ETL) 13.7.1 需求 13.7.1.1 输入数据 13.7.1.2 期望输出数据 13.7.2 需求分析 13.7.3实现代码 ...
- 大数据技术之Hadoop(Hadoop企业优化常见错误及解决方案)
6.1 MapReduce 跑的慢的原因 6.2 MapReduce优化方法 MapReduce优化方法主要从六个方面考虑:数据输入.Map阶段.Reduce阶段.IO传输.数据倾斜问题和常用的调优参 ...
- 大数据常见错误及解决方案
大数据常见错误及解决方案(转载) 1.用./bin/spark-shell启动spark时遇到异常:java.net.BindException: Can't assign requested add ...
- Hadoop常见异常及其解决方案
1.Shell$ExitCodeException 现象:运行hadoop job时出现如下异常: 14/07/09 14:42:50 INFO mapreduce.Job: Task Id : at ...
最新文章
- ECMAScript Query实例
- 理解ROS话题---ROS学习第5篇
- 交换机的4种网络结构方式你知道是什么吗?
- You must supply a resourceID for a TextView
- return在c语言中是什么意思
- 功能测试代码python_如何使您的Python代码更具功能性
- 它打败了欧几里得空间,踹飞了数学怪物,成为全世界的焦点
- java 方法 示例_Java语言环境getDisplayCountry()方法与示例
- linux 标准输出流管道,初学Linux之标准 I/O 和管道
- 敏捷外包工程系列之一:序言(敏捷外包工程,敏捷开发,CMMI,软件外包,政府项目,银行项目,电信项目)...
- 电脑桌面隐藏文件如何恢复出来呢
- Redfish Data model (红鱼的资料模型)
- gentoo 修改键盘映射
- python中encode用法_Python中encode()方法的使用简介
- 经典上海弄堂线路攻略
- 使用python调整excel表格的行和列以及合并或拆分单元格
- 叮咚~ 你有一份令人心动的offer待查收【cv君独家内推】
- 利用arduino红外库遥控美的家用空调
- 优秀课程案例|如何用scratch画折线统计图
- Tesra超算网络AI训练的使用流程
热门文章
- php极简云网盘网页版源码,PHP极简云盘个人网盘源码 文件管理与共享系统 自适应手机端...
- 微商城如何借势618微信营销?5分钟完成活动策划案
- Android生命周期详解
- 红楼梦人物出场统计python_红楼梦有多少人物统计(一)
- git命令和遇见得 warning:
- 【NDN实验】ndnSIM 2.0: A new version of the NDN simulator for NS-3 全文翻译
- android 开发 python_用python语言开发android应用程序(1) - 格物致知的博客空间 - 中国移动开发者社区 - Powered by X-Space...
- 如何通过手机APP远程控制PLC
- 从零开始搭建博客Hexo-Node-Git搭建博客
- 什么是CSTC价值协议