HDFS常用命令hdfs dfs
1.hdfs dfs、hadoop fs、hadoop dfs三个命令的区别
在介绍命令之前,首先要知道hdfs dfs、hadoop fs、hadoop dfs三个命令的区别。
hadoop fs:通用的文件系统命令,针对任何系统,比如本地文件、HDFS文件、HFTP文件、S3文件系统等。
hadoop dfs:特定针对HDFS的文件系统的相关操作,但是已经不推荐使用。
hdfs dfs:与hadoop dfs类似,同样是针对HDFS文件系统的操作,官方推荐使用。
2.hdfs dfs常用命令用法
命令 |
示例 |
解释 |
copyFromLocal |
hdfs dfs -copyFromLocal /root/test.txt /user/root/test.txt |
从linux本地文件系统拷贝到HDFS文件系统,/root/test.txt本地文件系统,/user/root/test.txt指HDFS文件系统文件 |
moveFromLocal |
hdfs dfs -moveFromLocal /root/test.txt /user/root/test.txt |
同上 |
put |
hdfs dfs -put /root/test.txt /user/root/test.txt |
同上 |
copyToLocal |
hdfs dfs -copyToLocal /user/root/test.txt /root/test.txt |
从HDFS文件系统拷贝到linux本地文件系统,/root/test.txt指本地文件系统,/user/root/test.txt指HDFS文件系统文件 |
moveToLocal |
hdfs dfs -moveToLocal /user/root/test.txt /root/test.txt |
同上 |
get |
hdfs dfs -get /user/root/test.txt /root/test.txt |
同上 |
ls |
hdfs dfs -ls -R / |
列举HDFS中根目录下面的所有目录,-R选项表示递归 |
mkdir |
hdfs dfs -mkdir -p /user/root/abc |
在HDFS创建/user/root/abc,-p表示递归创建目录 |
rm |
hdfs dfs -rm /user/root/test.txt |
删除HDFS上的/user/root/test.txt文件 |
HDFS常用命令hdfs dfs相关推荐
- HDFS常用命令的学习
HDFS常用命令的学习 文章目录 HDFS常用命令的学习 1. hadoop fs,hadoop dfs,hdfs fs,hdfs dfs 区别 2. Hadoop 命令 3. HDFS 常用命令 命 ...
- HDFS常用命令汇总
HDFS常用命令汇总 一.前言信息 二.帮助信息查看 1.查看帮助信息 2.帮助文档(附带命令的详细说明) 三.常用命令 1.创建目录 2.查看目录下的内容 3.上传文件 4.上传并删除源文件 5.查 ...
- java向hdfs提交命令_Java语言操作HDFS常用命令测试代码
本文主要向大家介绍了Java语言操作HDFS常用命令测试代码,通过具体的内容向大家展示,希望对大家学习JAVA语言有所帮助. package com.yxc.hdfs; import org.apac ...
- 熟悉常用的HDFS操作(附录HDFS常用命令)
文章目录 1. 学习目的 2. 学习内容 3. 实验一 3.1 追加文本 3.2 覆盖文本 3.3 脚本完成 4. 实验二 4.1 下载文件脚本 4.2 输出文件内容脚本 4.3 显示单个文件信息脚本 ...
- HDFS文件系统(含hdfs常用命令,java对hdfs API的简单操作)
HDFS文件系统 HDFS概念 什么是HDFS HDFS的组成 HDFS文件块大小 HFDS命令行操作 基本语法 常用命令 Java操作hdfs 配置编译环境 获取文件系统 上传文件 文件下载 目录创 ...
- Hadoop Shell命令-hdfs常用命令
Hadoop Shell命令-hdfs Hadoop Shell命令 cat chgrp chmod chown copyFromLocal copyToLocal cp du dus expunge ...
- 分布式文件系统HDFS常用命令
1:查看所有命令 hdfs dfs 2:查看目录下的文件列表 hdfs dfs -ls / 3:查看某文本文件的内容 hdfs dfs -cat /tmp/yy.txt 4:创建目录 hdfs dfs ...
- HDFS常用命令和客户端API操作
注意 1)记得快照,快照,快照一下 ECS服务器怎么快照? ECS服务器搭建hadoop伪分布式_CBeann的博客-CSDN博客_宝塔部署hadoop 2)参考资料(视频)的问题 上面网盘的视频, ...
- hadoop学习笔记(四):hdfs常用命令
一.hadoop fs 1.创建目录 [root@master hadoop-2.7.0]# hadoop fs -mkdir /testdir1 [root@master hadoop-2.7.0] ...
最新文章
- ProxyError: Conda cannot proceed due to an error in your proxy configuration
- mysql总是出现-_mysql 总是莫名其妙的关闭:报错
-问答-阿里云开发者社区-阿里云...
- excel两个表格数据对比_Excel表格怎么防止看错数据?阅读模式了解一下
- 异步加载js的三种方法
- mybatis解决属性名和数据列名不一致
- 01_什么是one-hot编码、one-hot编码过程详解、为什么需要one-hot编码?one-hot编码的优缺点、使用sklearn中的API举例
- Java程序员的工资为什么一直那么高?
- C0301 代码块{}的使用,重定向, 从文件中读取行
- $.countdown is not a function
- 小程序左右标签滑块排行榜
- centos8安装MySQL依赖_centos8安装mysql8
- python输出所有组合数_python – GridSearchCV是否存储了所有参数组合的所有分数?...
- ggplot2绘图点的形状不够用怎么办?
- cookie购物车php简单,php中利用cookie实现购物车实例_PHP教程
- java w3c解析xml乱码_下载xml 中文乱码
- “恩智浦”杯智能车竞赛总结
- paypal php 接口文档,paypal接口开发记录
- 优点家庭服务器修改wifi,家庭联网三种方式---不看后悔! - 【 网络基础 】 - 我是网管论坛 - 畅通网络 因......
- webworker应用场景_多线程编程开发应用场景
- hive查看一张表的分区字段_Hive表分区与索引