Ambari集群里操作时典型权限问题put: `/home/bigdata/1.txt': No such file or directory的解决方案（图文详解）...

　　不多说，直接上干货！

问题详情

　　　　明明put该有的文件在，可是怎么提示的是文件找不到的错误呢？

　　　　我就纳闷了put: `/home/bigdata/1.txt': No such file or directory

[bigdata@ambigdata1 ~]$ pwd
/home/bigdata
[bigdata@ambigdata1 ~]$ ls
1.txt  Desktop  Documents  Downloads  Music  Pictures  Public  Templates  Videos
[bigdata@ambigdata1 ~]$
[bigdata@ambigdata1 ~]$ hadoop fs -put 1.txt /paperdata
put: Permission denied: user=bigdata, access=WRITE, inode="/paperdata._COPYING_":hdfs:hdfs:drwxr-xr-x
[bigdata@ambigdata1 ~]$
[bigdata@ambigdata1 ~]$ sudo -u hdfs hadoop fs -put 1.txt /paperdata
put: `1.txt': No such file or directory
[bigdata@ambigdata1 ~]$

问题原因

　　　其实是，权限的问题。

　　刚开始，我也纳闷，报没有文件错误，经过排查是权限问题，同时，在hdfs用户切换过来也得到了验证。

　　除了自己谁都操作不了。

　　bigdata用户是我安装ambari集群时候的用户，是除了自己bigdata这个用户之外，以及root用户，其余全都无法操作。

　　问题解决办法

　　[bigdata@ambigdata1 ~]$ sudo -u hdfs hadoop fs -mkdir /papaerdata

　　 [bigdata@ambigdata1 ~]$ sudo -u hdfs hadoop fs -chmod -R 777 /papaerdata

　　 [root@ambigdata1 ~]# chmod 755 -R /root

　　[root@ambigdata1 bigdata]# sudo -u hdfs hadoop fs -chmod -R 777 /paperdata

　　 [root@ambigdata1 bigdata]# hadoop fs -put 1.txt /paperdata

　　　成功！

　　切换到hdfs上验证下（必须得先从）

　　[bigdata@ambigdata1 ~]$ su root
　　Password:
　　[root@ambigdata1 bigdata]# su hdfs
　　[hdfs@ambigdata1 bigdata]$

　　[hdfs@ambigdata1 ~]$ touch 2.txt
　　[hdfs@ambigdata1 ~]$ hadoop fs -put 2.txt /paperdata
　　[hdfs@ambigdata1 ~]$

　　如果想删除，则

[root@ambigdata1 bigdata]# sudo -u hdfs hadoop fs -rm -r /paperdata/1.txt
17/12/23 16:50:18 INFO fs.TrashPolicyDefault: Namenode trash configuration: Deletion interval = 360 minutes, Emptier interval = 0 minutes.
Moved: 'hdfs://ambigdata1:8020/paperdata1.txt' to trash at: hdfs://ambigdata1:8020/user/hdfs/.Trash/Current
[root@ambigdata1 bigdata]#

spark-submit --master yarn-cluster --num-executors 4 --driver-memory 4g --executor-memory 4g --executor-cores 4 --class iforest.TestIF hdfs://ambigdata1:9000/paperdata/IForestSpark.jar hdfs://ambigdata1:9000/paperdata/UNSW-NB15_change.csv hdfs://ambigdata1:9000/paperdata/out

欢迎大家，加入我的微信公众号：大数据躺过的坑人工智能躺过的坑

同时，大家可以关注我的个人博客：

http://www.cnblogs.com/zlslch/ 和 http://www.cnblogs.com/lchzls/ http://www.cnblogs.com/sunnyDream/

详情请见：http://www.cnblogs.com/zlslch/p/7473861.html

　　人生苦短，我愿分享。本公众号将秉持活到老学到老学习无休止的交流分享开源精神，汇聚于互联网和个人学习工作的精华干货知识，一切来于互联网，反馈回互联网。
　　目前研究领域：大数据、机器学习、深度学习、人工智能、数据挖掘、数据分析。语言涉及：Java、Scala、Python、Shell、Linux等。同时还涉及平常所使用的手机、电脑和互联网上的使用技巧、问题和实用软件。只要你一直关注和呆在群里，每天必须有收获

对应本平台的讨论和答疑QQ群：大数据和人工智能躺过的坑（总群）（161156071）

转载于:https://www.cnblogs.com/zlslch/p/8093730.html

Ambari集群里操作时典型权限问题put: `/home/bigdata/1.txt': No such file or directory的解决方案（图文详解）...相关推荐

给Clouderamanager集群里安装基于Hive的大数据实时分析查询引擎工具Impala步骤（图文详解）...
不多说,直接上干货! 这个很简单,在集群机器里,选择就是了,本来自带就有Impala的. 扩展博客给Ambari集群里安装基于Hive的大数据实时分析查询引擎工具Impala步骤(图文详解) 欢迎大 ...
分区助手里如何从临近盘（如D盘）抽取一定的空间给已经快满了的盘（如E盘）（博主推荐）（图文详解）...
不多说,直接上干货! 分区助手是什么?(博主推荐)(图文详解) 分区助手各版本比较(图文详解) 分区助手官网使用教程(专业版.绿色版和WinPE版)(图文详解) 安装分区助手时出现"分区助手 ...
在集群的操作机上执行命令为什么会出现权限被拒绝_如何使用 TDengine 2.0 最新开源的集群功能？
导读:8月3日,TDengine 发布了 v2.0 版本,这次更新最大的亮点是,我们将分布式集群功能开源.开源后,引起了很大反响,又连续几天在 GitHub 趋势榜排名第一.不少关注TDengine的 ...
SSD固态盘应用于Ceph集群的四种典型使用场景
在虚拟化及云计算技术大规模应用于企业数据中心的科技潮流中,存储性能无疑是企业核心应用是否虚拟化.云化的关键指标之一.传统的做法是升级存储设备,但这没解决根本问题,性能和容量不能兼顾,并且解决不好设备利 ...
Ambari集群移动现有复制到另外地方或更改ip地址，导致各项服务组件上为黄色问号代表心跳丢失的解决方案（图文详解）（博主推荐）...
前言最近,是在做集群搬移工作,大家肯定会遇到如下的场景. (1) 比如,你新购买的电脑,初步者学习使用Ambari集群.从旧电脑复制到新电脑这边来. (2) 比如,你公司Ambari集群的ip,因业 ...
ambari集群安装hdp
接上篇<ambari集群搭建详细步骤> 说明:ambari2.6.5和ambari2.7.5的页面不一样集成安装向导 Get Started 开始 Select Version 选择版本 ...
Ambari集群搭建
[集群规划] 虚拟机1 虚拟机2 虚拟机3 内存 5GB 5GB 5GB 磁盘 115GB 115GB 115GB host名 vm01 vm02 vm03 ip地址 192.168.1.100 ...
2021年大数据HBase（二）：HBase集群安装操作
全网最详细的大数据HBase文章系列,强烈建议收藏加关注! 新文章都已经列出历史文章目录,帮助大家回顾前面的知识重点. 目录系列历史文章前言 HBase集群安装操作一.上传解压HBase安装包 ...
Java接口对Hadoop集群的操作
Java接口对Hadoop集群的操作首先要有一个配置好的Hadoop集群这里是我在SSM框架搭建的项目的测试类中实现的一.windows下配置环境变量下载文件并解压到C盘或者其他目录. 链接: ...
说说单节点集群里安装hive、3\5节点集群里安装hive的诡异区别（版本搭配）
这几天,无意之间,被这件事情给迷惑,不解!先暂时贴于此,以后再解决! 详细问题如下: 在hive的安装目录下(我这里是 /home/hadoop/app/hive-1.2.1),hive的安装目录的l ...

Ambari集群里操作时典型权限问题put: `/home/bigdata/1.txt': No such file or directory的解决方案（图文详解）...

Ambari集群里操作时典型权限问题put: `/home/bigdata/1.txt': No such file or directory的解决方案（图文详解）...相关推荐

最新文章

热门文章