linux进入hdfs目录,fuse挂载hdfs目录到linux本地

1,安装fuse

yum -y install hadoop-hdfs-fuse

2.修改环境变量

vi /etc/profile

增加如下配置：

JAVA_HOME=/usr/jdk64/jdk1.8.0_60

HADOOP_HOME=/usr/hdp/2.4.0.0-169/hadoop

export PATH=$HADOOP_HOME/bin:$JAVA_HOME/bin:$PATH

export LD_LIBRARY_PATH=/usr/hdp/2.4.0.0-169/usr/lib/:/usr/local/lib:/usr/lib:$LD_LIBRARY_PATH:$HADOOP_HOME/build/c++/Linux-amd64-64/lib:${JAVA_HOME}/jre/lib/amd64/server

3.创建挂载点 (要挂载到linux的本地目录)

mkdir /hdfs

4.挂载

方法一：hadoop-fuse-dfs dfs://ocdp /hdfs

[root@vmocdp125 lib]# hadoop-fuse-dfs dfs://ocdp /hdfs

INFO /grid/0/jenkins/workspace/HDP-build-centos6/bigtop/build/hadoop/rpm/BUILD/hadoop-2.7.1.2.4.0.0-src/hadoop-hdfs-project/hadoop-hdfs/src/main/native/fuse-dfs/fuse_options.c:164 Adding FUSE arg /hdfs

”ocdp“ 为集群的名称,hdfs-site.xml中nameservice的值

方法二：

自动挂载方法：

linux进入hdfs目录,fuse挂载hdfs目录到linux本地相关推荐

Docker中创建MySQL容器，将宿主机目录直接挂载到目录
Docker中创建MySQL容器,将宿主机目录直接挂载到目录 1.在Docker中下载MySQL镜像 docker pull mysql:5.7.25 2.创建目录/tmp/mysql/data和/t ...
关于LVM快速扩展Linux根目录/，缩减重挂载/home目录
前言新机器随便搞,默认根目录又给我搞了50个g,我特别爱偷懒自动安装好吧,c这回5台新机器有的搞了,总结下,50个g随便跑几个docker镜像,打打日志就没了,尤其微服务的镜像还贼多,老服务器不敢动 ...
Docker -v 对挂载的目录没有权限 Permission denied解决办法
情况描述今天在使用docker run -d -p 9091:8080 -v /home/daniu/docker/tomcat/webapps/:/usr/local/tomcat/we ...
随手记：CentOS7 下 Docker 中 MySQL5.7 挂载宿主目录无权限
在使用 docker run 运行一个 docker 镜像的时候,有时会用到 -v 将容器中的目录挂载到宿主机的目录,此时可能会遇到目录无权限(Permission denied)的问题.此时可以使用 ...
linux connect自动重连,Linux系统中使用sshfs挂载远程主机的目录到本地系
在Linux下,有很多挂载远程(别的机器)目录的方法,例如NFS. 之前一直在用NFS,但是配置起来比较麻烦(需要N个C一个S),而且不太稳定(断网后无法卸载!),现在换sshfs,它基于Linux内 ...
Linux常用的挂载远程目录方案使用有感
背景: 作为一名系统架构师,在系统设计之初,就应考虑清楚数据结构.文件结构等几件大事.Linux作为高效.可用.可靠的操作系统,笔者偏爱基于其基础上的系统研发,本文围绕在LINUX中常用的挂载远程目录 ...
Linux 挂载远程目录
目录方案一:SSHFS 方案二:NFS 使用其他本文装载自https://zhuanlan.zhihu.com/p/141714106 对于 Linux 服务器来说,挂载远程目录就是这个「移动硬 ...
HDFS系统中Browse Directory目录显示WebHDFS已禁用
HDFS系统中Browse Directory目录显示 Path does not exist on HDFS or WebHDFS is disabled. Please check your pa ...
Flume实操（三）【实时读取目录文件到HDFS案例】
1)案例需求:使用Flume监听整个目录的文件 2)需求分析: 3)实现步骤: 1．创建配置文件flume-dir-hdfs.conf [root@henu1 job]# touch flume-di ...

linux进入hdfs目录,fuse挂载hdfs目录到linux本地

linux进入hdfs目录,fuse挂载hdfs目录到linux本地相关推荐

最新文章

热门文章