1.hdfs dfs、hadoop fs、hadoop dfs三个命令的区别

在介绍命令之前,首先要知道hdfs dfs、hadoop fs、hadoop dfs三个命令的区别。

hadoop fs:通用的文件系统命令,针对任何系统,比如本地文件、HDFS文件、HFTP文件、S3文件系统等。

hadoop dfs:特定针对HDFS的文件系统的相关操作,但是已经不推荐使用。

hdfs dfs:与hadoop dfs类似,同样是针对HDFS文件系统的操作,官方推荐使用。

2.hdfs dfs常用命令用法

命令

示例

解释

copyFromLocal

hdfs dfs -copyFromLocal /root/test.txt /user/root/test.txt

从linux本地文件系统拷贝到HDFS文件系统,/root/test.txt本地文件系统,/user/root/test.txt指HDFS文件系统文件

moveFromLocal

hdfs dfs -moveFromLocal /root/test.txt /user/root/test.txt

同上

put

hdfs dfs -put /root/test.txt /user/root/test.txt

同上

copyToLocal

hdfs dfs -copyToLocal /user/root/test.txt /root/test.txt

从HDFS文件系统拷贝到linux本地文件系统,/root/test.txt指本地文件系统,/user/root/test.txt指HDFS文件系统文件

moveToLocal

hdfs dfs -moveToLocal /user/root/test.txt /root/test.txt

同上

get

hdfs dfs -get /user/root/test.txt /root/test.txt

同上

ls

hdfs dfs -ls -R /

列举HDFS中根目录下面的所有目录,-R选项表示递归

mkdir

hdfs dfs -mkdir -p /user/root/abc

在HDFS创建/user/root/abc,-p表示递归创建目录

rm

hdfs dfs -rm /user/root/test.txt

删除HDFS上的/user/root/test.txt文件

HDFS常用命令hdfs dfs相关推荐

  1. HDFS常用命令的学习

    HDFS常用命令的学习 文章目录 HDFS常用命令的学习 1. hadoop fs,hadoop dfs,hdfs fs,hdfs dfs 区别 2. Hadoop 命令 3. HDFS 常用命令 命 ...

  2. HDFS常用命令汇总

    HDFS常用命令汇总 一.前言信息 二.帮助信息查看 1.查看帮助信息 2.帮助文档(附带命令的详细说明) 三.常用命令 1.创建目录 2.查看目录下的内容 3.上传文件 4.上传并删除源文件 5.查 ...

  3. java向hdfs提交命令_Java语言操作HDFS常用命令测试代码

    本文主要向大家介绍了Java语言操作HDFS常用命令测试代码,通过具体的内容向大家展示,希望对大家学习JAVA语言有所帮助. package com.yxc.hdfs; import org.apac ...

  4. 熟悉常用的HDFS操作(附录HDFS常用命令)

    文章目录 1. 学习目的 2. 学习内容 3. 实验一 3.1 追加文本 3.2 覆盖文本 3.3 脚本完成 4. 实验二 4.1 下载文件脚本 4.2 输出文件内容脚本 4.3 显示单个文件信息脚本 ...

  5. HDFS文件系统(含hdfs常用命令,java对hdfs API的简单操作)

    HDFS文件系统 HDFS概念 什么是HDFS HDFS的组成 HDFS文件块大小 HFDS命令行操作 基本语法 常用命令 Java操作hdfs 配置编译环境 获取文件系统 上传文件 文件下载 目录创 ...

  6. Hadoop Shell命令-hdfs常用命令

    Hadoop Shell命令-hdfs Hadoop Shell命令 cat chgrp chmod chown copyFromLocal copyToLocal cp du dus expunge ...

  7. 分布式文件系统HDFS常用命令

    1:查看所有命令 hdfs dfs 2:查看目录下的文件列表 hdfs dfs -ls / 3:查看某文本文件的内容 hdfs dfs -cat /tmp/yy.txt 4:创建目录 hdfs dfs ...

  8. HDFS常用命令和客户端API操作

    注意 1)记得快照,快照,快照一下 ECS服务器怎么快照?  ECS服务器搭建hadoop伪分布式_CBeann的博客-CSDN博客_宝塔部署hadoop 2)参考资料(视频)的问题 上面网盘的视频, ...

  9. hadoop学习笔记(四):hdfs常用命令

    一.hadoop fs 1.创建目录 [root@master hadoop-2.7.0]# hadoop fs -mkdir /testdir1 [root@master hadoop-2.7.0] ...

最新文章

  1. ProxyError: Conda cannot proceed due to an error in your proxy configuration
  2. mysql总是出现-_mysql 总是莫名其妙的关闭:报错 -问答-阿里云开发者社区-阿里云...
  3. excel两个表格数据对比_Excel表格怎么防止看错数据?阅读模式了解一下
  4. 异步加载js的三种方法
  5. mybatis解决属性名和数据列名不一致
  6. 01_什么是one-hot编码、one-hot编码过程详解、为什么需要one-hot编码?one-hot编码的优缺点、使用sklearn中的API举例
  7. Java程序员的工资为什么一直那么高?
  8. C0301 代码块{}的使用,重定向, 从文件中读取行
  9. $.countdown is not a function
  10. 小程序左右标签滑块排行榜
  11. centos8安装MySQL依赖_centos8安装mysql8
  12. python输出所有组合数_python – GridSearchCV是否存储了所有参数组合的所有分数?...
  13. ggplot2绘图点的形状不够用怎么办?
  14. cookie购物车php简单,php中利用cookie实现购物车实例_PHP教程
  15. java w3c解析xml乱码_下载xml 中文乱码
  16. “恩智浦”杯智能车竞赛总结
  17. paypal php 接口文档,paypal接口开发记录
  18. 优点家庭服务器修改wifi,家庭联网三种方式---不看后悔! - 【 网络基础 】 - 我是网管论坛 - 畅通网络 因......
  19. webworker应用场景_多线程编程开发应用场景
  20. hive查看一张表的分区字段_Hive表分区与索引

热门文章

  1. 计算机网络拨号上网过程,路由器不能拨号致使您无法上网怎么办
  2. android直播功能实现,Android视频直播功能实现流程
  3. 多少年后,每年招生人数达到或超过10000人
  4. python爬取豆瓣短评_爬取并简单分析豆瓣电影短评
  5. word中将表格单元格合并后,如何让文字上下也处于居中的位置
  6. POJ3295 Tautology
  7. 搜狗两大AI翻译神器亮相CES 实力演绎用中文与世界对话
  8. wacom android 文件传输,Wacom sign pro PDF
  9. 如何选择MT4交易软件?
  10. ORACLE 中的一些特殊符号