目的:

学会HDFS CLI 常用操作

环境:

Hadoop 2.6.4 伪分布式版

环境搭建参考本博客前篇文章:

伪分布式 hadoop 2.6.4

帮助:

hadoop@ssmaster:~$ hadoop fs
Usage: hadoop fs [generic options][-appendToFile <localsrc> ... <dst>][-cat [-ignoreCrc] <src> ...][-checksum <src> ...][-chgrp [-R] GROUP PATH...][-chmod [-R] <MODE[,MODE]... | OCTALMODE> PATH...][-chown [-R] [OWNER][:[GROUP]] PATH...][-copyFromLocal [-f] [-p] [-l] <localsrc> ... <dst>][-copyToLocal [-p] [-ignoreCrc] [-crc] <src> ... <localdst>][-count [-q] [-h] <path> ...][-cp [-f] [-p | -p[topax]] <src> ... <dst>][-createSnapshot <snapshotDir> [<snapshotName>]][-deleteSnapshot <snapshotDir> <snapshotName>][-df [-h] [<path> ...]]   .........   .........

任务:

1  创建目录

hadoop@ssmaster:~$ hadoop fs -mkdir data
hadoop@ssmaster:~$ hadoop fs -ls /
Found 1 items
drwxr-xr-x - hadoop supergroup 0 2016-10-22 22:33 /data

2  Linux 本地准备文件,内容任意英文

hadoop@ssmaster:~$ vi paper.txt
hadoop@ssmaster:~$ ls
Desktop  Documents  Downloads  examples.desktop  hadoop-2.6.4.tar.gz  Music  paper.txt  Pictures  Public  Templates  Videos
hadoop@ssmaster:~$ more paper.txt

There are moments in life when you miss someone so much that you just want to pick them from your dreams and hug them for real! Dream
what you want to dream;go where you want to go;be what you want to be,because you have only one life and one chance to do all the th
ings you want to do

.....

3  上传文件 Linux 本地到 HDFS

hadoop@ssmaster:~$ hadoop fs -put paper.txt /data
DEPRECATED: Use of this script to execute hdfs command is deprecated.
Instead use the hdfs command for it.hadoop@ssmaster:~$ hadoop fs -ls /data
Found 1 items
-rw-r--r--   1 hadoop supergroup       1762 2016-10-22 22:44 /data/paper.txt

4  查看HDFS 文件内容

hadoop@ssmaster:~$ hadoop fs -cat /data/paper.txt
There are moments in life when you miss someone so much that you just want to pick them from your dreams and hug them for real! Dream what you want to dream;go where you want to go;be what you want to be,because you have only one life and one chance to do all the things you want to do.

5 下载到linux本地

hadoop@ssmaster:~$ rm paper.txt
hadoop@ssmaster:~$ ls
Desktop  Documents  Downloads  examples.desktop  hadoop-2.6.4.tar.gz  Music  Pictures  Public  Templates  Videos
hadoop@ssmaster:~$ hadoop fs -get /data/paper.txt
hadoop@ssmaster:~$ ls
Desktop  Documents  Downloads  examples.desktop  hadoop-2.6.4.tar.gz  Music  paper.txt  Pictures  Public  Templates  Videos

6  删除HDFS 文件

hadoop@ssmaster:~$ hadoop fs -rm /data/paper.txt
16/10/22 22:47:28 INFO fs.TrashPolicyDefault: Namenode trash configuration: Deletion interval = 0 minutes, Emptier interval = 0 minutes.
Deleted /data/paper.tx

7 删除目录

hadoop@ssmaster:~$ hadoop fs -ls /
Found 4 items
drwxr-xr-x   - hadoop supergroup          0 2016-10-22 22:48 /data
drwxr-xr-x   - hadoop supergroup          0 2016-10-23 00:01 /input
drwxr-xr-x   - hadoop supergroup          0 2016-10-23 00:08 /output
drwx------   - hadoop supergroup          0 2016-10-23 00:05 /tmphadoop@ssmaster:~$ hadoop fs -rm  -r /input
16/10/23 00:37:03 INFO fs.TrashPolicyDefault: Namenode trash configuration: Deletion interval = 0 minutes, Emptier interval = 0 minutes.
Deleted /input
hadoop@ssmaster:~$ hadoop fs -ls /
Found 3 items
drwxr-xr-x   - hadoop supergroup          0 2016-10-22 22:48 /data
drwxr-xr-x   - hadoop supergroup          0 2016-10-23 00:08 /output
drwx------   - hadoop supergroup          0 2016-10-23 00:05 /tmp

转载于:https://www.cnblogs.com/sunzebo/p/5989920.html

[0002] Hadoop HDFS cmd常用命令练手相关推荐

  1. 大数据_07 【hadoop HDFS的shell命令操作】

    大数据_07 [hadoop HDFS的shell命令操作] 01 基本语法 02 常用普通命令实操 03 HDFS常用高级命令 04 HDFS适用场景 05 HDFS不适用场景 06 hdfs的安全 ...

  2. hadoop/hdfs/yarn 详细命令搬运

    hadoop/hdfs/yarn 详细命令搬运 转载自文章 http://www.cnblogs.com/davidwang456/p/5074108.html 安装完hadoop后,在hadoop的 ...

  3. cmd:计算机cmd常用命令集合之详细攻略daiding

    cmd:计算机cmd常用命令集合之详细攻略daiding 目录 1.查看自己电脑上的显存大小 2.远程登陆界面 3.查看已经被占用的端口.以及端口进程 4.ipconfig 5.切换目录 1.查看自己 ...

  4. gulp安装流程、使用方法及cmd常用命令导览

    gulp安装流程.使用方法及CMD常用命令导览 来自前端小白的gulp及周边知识学习总结 一.名词介绍: Npm--node包管理工具 一开始我不理解,包管理工具是什么鬼.后来用到的gulp也好,gu ...

  5. CMD 常用命令总结

    CMD 常用命令总结 文章目录 CMD 常用命令总结 命令行 语法格式 cmd命令操作 cmd命令操作 cmd命令操作 cmd命令操作 cmd命令操作 保存为 .bat 可执行文件 使用实践 命令行 ...

  6. python pip、conda、windows CMD常用命令大全!

    文章目录 python pip 常用命令 1.查找软件 2.安装软件 3.更新软件 4.卸载软件 5.列出已安装软件 6.查看一个软件包时安装了哪些文件 7.命令补全 8.升级所有包 9.修改pip安 ...

  7. windows的cmd常用命令

    文章目录 一.位 二.cmd基本操作 1.win+R启动运行 2.打开cmd 3.运行的命令 三.cmd常用命令 1.功能性命令 2.文件操作 3.shutdown 4.tasklist命令 5.ta ...

  8. larvel 5.7命令行cmd常用命令

    larvel 5.7命令行cmd常用命令 一.使用如下 Artisan 命令创建一个新的 TagCreateRequest: 1.创建常规类()Make 文件夹 控制器名字 例如表单请求类: php ...

  9. 大数据——HDFS的常用命令

    标题大数据--HDFS的常用命令 hdfs常用命令行: (1)查看帮助hdfs dfs -help (2)查看当前目录信息hdfs dfs -ls /(3)上传文件hdfs dfs -put /本地路 ...

最新文章

  1. 8.17——继续熟悉linux的命令行
  2. webservice获取天气预报异常
  3. 百练OJ:3681与2796:数字求和
  4. 启动 docker 容器报错 (iptables failed: iptables --wait -t filter -A DOCKER ! -i docker0 -o docker0
  5. java解析日志数据_Java实时监控日志文件并输出的方法详解
  6. nginx日志中添加请求的response日志
  7. 洛谷 P2324 [SCOI2005]骑士精神 解题报告
  8. 『数据库』数据库的查询可不是只知道Select就可以的--关系数据库系统的查询处理
  9. java 根据类名示例化类_Java LocalDateTime类| atOffset()方法与示例
  10. 优麒麟 20.04 LTS 版本发布,UKUI3.0 灵动转身
  11. 使用ember-cli脚手架快速构建项目
  12. react native快速上手
  13. mmdetection的使用
  14. 山西台达plc可编程控制器_可编程控制器10(PLC)基本指令系统
  15. cdrom是什么意思_开启电脑时出现CDROM是什么意思
  16. 键盘密码(Qwerty)——python解密
  17. jqgrid实现表头合并功能
  18. 解析二分查找时间复杂度
  19. 不要去打扰别人的幸福
  20. iOS 画图context/QuartzCore(相关函数的解释)

热门文章

  1. [AWDwR4] No JQuery call matches [:html, #cart]
  2. POJ 2195 【二分图最佳匹配】.cpp
  3. JAVASCRIPT和数据结构,算法
  4. 结构类型需要重载GetHashCode和Equals
  5. Mr.J--简单页面制作
  6. UIControl UIImage
  7. 软考——(1)J2SE
  8. 解决SQL查询总是 超时已过期
  9. NodeJs取参的四种方法
  10. [ES6] 细化ES6之 -- 迭代器与生成器