hdfs入门——常用命令

2019独角兽企业重金招聘Python工程师标准>>>

hadoop fs：使用面最广，可以操作任何文件系统。

hadoop dfs与hdfs dfs：只能操作HDFS文件系统相关（包括与Local FS间的操作），前者已经Deprecated，一般使用后者。

可通过【-help 命令名称】查看帮助。

1.创建目录

hdfs fs -mkdir /user/test

2.上传文件

hdfs fs -put test.txt user/test

3.上传文件到HDFS

hdfs dfs put filename newfilename

4.列出hdfs上的文件

hdfs -dfs -ls

5.列出hdfs某个文件夹下的文件

hdfs -dfs -ls 文件夹名

6.查看hdfs下某个文件内容

hdfs -dfs -cat  文件名

7.查看hdfs某个文件夹下所有文件内容

hdfs -dfs -cat 文件名/*

8.将hdfs文件复制到本地文件系统

hdfs -dfs -get 文件名 新文件名

9.删除hdfs下的文件（递归删）

hdfs dfs -rmr 文件夹

10.格式化hdfs

hdfs NameNode -format

11.将多个文件复制到同一个目录下

hdfs fs -cp URI {URI...} <dest>

12.显示hdfs文件夹大小

hdfs fs -dus 文件夹

13.显示hdfs文件大小

hdfs fs -du 文件路径和文件名

14.清空hdfs回收站

hdfs fs -expunge

15.复制hdfs文件到本地

hdfs fs -get src dest

17.修改hdfs文件的副本数（—R递归所目录下所有文件）

hdfs -fs -setrep -w -R 文件路径

18.返回hdfs文件的路径统计信息

hdfs fs -stat URI

19.查看文件末尾1KB的内容

hdfs fs -tail pathname

20.检查文件是否存在

hdfs fs -test uri

21.检查路径是否是个目录

hdfs fs -test -d filename

22.将原文件以text格式输出

hdfs fs -text src

23.创建一个空文件

hdfs fs -touchz pathname

24.报告hdfs的基本信息

hdfs dfsadmin -report

25.进入离开安全模式

hdfs dfsadmin -sagemode enter/leave

26.重新负载均衡

bin/start-balancer.sh

转载于:https://my.oschina.net/freelili/blog/1853703

hdfs入门——常用命令相关推荐

linux入门_linux入门-常用命令的使用
linux入门-常用命令的使用对于命令行的接触,最开始是window下的cmd,比如查看电脑ip地址.进入某一个文件夹.下载npm模块等等 window cmd window ipconfig 对于 ...
mysql修行练级之mysql新手入门常用命令
mysql修行练级之mysql新手入门常用命令创建时间:2014.08.24 修改时间:2014.09.26 从一个运维工程师和DBA新手的角度出发,学习,实践从而掌握mysql相关操作. 1.登录 ...
大数据——HDFS的常用命令
标题大数据--HDFS的常用命令 hdfs常用命令行: (1)查看帮助hdfs dfs -help (2)查看当前目录信息hdfs dfs -ls /(3)上传文件hdfs dfs -put /本地路 ...
eNSP入门常用命令（一）以及模拟双PC双路由互通
eNSP入门常用命令(一)以及模拟双PC双路由互通 1. 基本命令 system-view 用户进入系统命令缩写 syssysname 修改系统名命令interface 参数(接口名称)进入接口命令 ...
Linux入门-常用命令
学前建议: 个人认为Linux入门首先学会如何安装并成功登录Linux系统接下来的入门-常用命令完全可以跟着任意的教程敲一下命令,比如怎么复制粘贴文件.创建文件夹.打包.压缩.解压等,自己多实践多理 ...
HDFS文件常用命令
1.fs最常用命令 bin/hadoop fs -ls hdfs_path //查看HDFS目录下的文件和子目录 bin/hadoop fs -mkdir hdfs_path //在HDFS上创建文件 ...
[0002] Hadoop HDFS cmd常用命令练手
目的: 学会HDFS CLI 常用操作环境: Hadoop 2.6.4 伪分布式版环境搭建参考本博客前篇文章: 伪分布式 hadoop 2.6.4 帮助: hadoop@ssmaster:~$ h ...
Linux入门常用命令大全
Linux常用命令一.linux文件和目录命令二.更改.创建或删除文件夹等三.查看文件内容: 四.vi/vim 五.用户和用户组 5.1 用户和用户组是什么? 5.2 Linux操作系统用户的特 ...
嵌入式linux入门-常用命令介绍
使用芯片手册的时候,会时常的看到芯片中有的位填写的数字有保留,那是为了以后芯片升级和扩展使用的,现在是不使用.如GPF4占用的[9:8] 00 = Input,01 = Output, 10 = EI ...

hdfs入门——常用命令

hdfs入门——常用命令相关推荐

最新文章

热门文章