hadoop_hdfs命令

标注一下：最近学hadoop，看的是尚硅谷的视频，做的笔记

hdfs[hadoop2]使用命令（不管打开opt下的hadoop还是不打开都没有干扰）：

[hadoop fs -命令 源文件夹/文件 目标文件夹/文件]

1.创建一个三国文件夹

         vim weiguo.txtvim shuguo.txtvim wuguo.txtvim weiguo2.txt

2.1上传：
2.1.1本地文件（shuguo.txt）剪切粘贴到hdfs的（sanguo文件夹）

   hadoop fs -moveFromLocal ./shuguo.txt /sanguo

2.1.2本地文件（weiguo.txt）复制粘贴到hdfs的（sanguo文件夹）

   hadoop fs -copyFromLocal weiguo.txt /sanguo

(hadoop fs -copyFromLocal weiguo.txt /sanguo 这两个运行是一样的不必拘泥于路径的配置)
2.1.3使用put复制粘贴(等同于copyFromlocal)

   hadoop fs -put ./wuguo.txt /sanguo

2.1.4使用appendToFile追加数据(hdfs的缺点：只允许追加不允许修改且只能在文件末尾追加)

  hadoop fs -appendToFile weiguo2.txt /sanguo/weiguo.txt

2.2下载
2.2.1(copyToLocal) 从hdfs拷贝sanguo文件夹的所有文件到本地目录

   hadoop fs -copyToLocal /sanguo/shuguo.txt ./

2.2.2 get 将sanguo文件夹的shuguo.txt拷贝为shuguo2.txt

  hadoop fs -get /sanguo/shuguo.txt ./shuguo2.txt

2.3直接操作
2.3.1 ls查看全部文件夹 :

 hadoop fs -ls /

2.3.2 ls查看当前文件夹的文件：

hadoop fs -ls /sanguo

2.3.3 cat查看文件：

hadoop fs -cat /sanguo/shuguo.txt

2.3.4 修改权限(group)：

hadoop fs -chown atguigu:atguigu /sanguo/shuguo.txt

2.3.5 mkdir创建文件夹：

hadoop fs -mkdir /jinguo

2.3.6 cp从hdfs的一个路径拷贝到hdfs的另一个路径(相当于hdfs文件之间的拷贝)：

hadoop fs -cp /sanguo/shuguo.txt  /jinguo

2.3.7 mv在hdfs中剪切移动文件：

hadoop fs -mv /sanguo/wuguo.txt  /jinguo

2.3.8 rm删除文件或者文件夹：

hadoop fs -rm /sanguo/weiguo2.txt

2.3.9 对副本的修改（如只需要一个副本）-遵循距离最近向量算法

 hadoop fs -setrep 10 /jinguo/shuguo.txt

hadoop_hdfs命令相关推荐

Kubectl 常用命令, 开发人员常用k8s命令
Kubectl 常用命令: 什么是常用,我用的,就是常用的
ECS（Linux）连接RDS，使用命令行方式连接实例
使用命令行方式连接实例通过命令行连接RDS MySQL数据库,连接方式如下: mysql -h<连接地址> -P<端口> -u<用户名> -p -D<数据库 ...
设置普通用户执行docker命令，执行docker命令无需输入密码或者切换root用户
每次执行docker命令都要输入密码或者切换root用户,非常不方便,尤其是在shell脚本中就更麻烦了,一起来解决这个问题: 1. 创建名为docker的组,如果之前已经有该组就会提示已存在: su ...
从命令行到IDE，版本管理工具Git详解（远程仓库创建+命令行讲解+IDEA集成使用）
首先,Git已经并不只是GitHub,而是所有基于Git的平台,只要在你的电脑上面下载了Git,你就可以通过Git去管理"基于Git的平台"上的代码,常用的平台有GitHub.Gi ...
作为一个java程序员，常用的linux命令（越攒越多）
本篇记录我在工作中不断遇到的常用的linux命令,并进行总结,时常更新! 1. 升级服务时先停止服务,然后进行替换 linux中杀进程时候,如果你是知道它所占用的端口号的话,可以通过 netstat ...
docker上你必须会的那些命令
一.基础类查看docker信息 # 查看docker版本 docker version # 显示docker系统的信息 docker info # 日志信息 docker logs # 故障检查 s ...
基于Golang的CLI 命令行程序开发
基于Golang的CLI 命令行程序开发 [阅读时间:约15分钟] 一. CLI 命令行程序概述二. 系统环境&项目介绍&开发准备 1.系统环境 2.项目介绍 3.开发准备三.具体 ...
简单解决用VS编写hello world时命令行一闪而过
一.在return 0;前一行加一个getchar(); 二.使用项目模板为 windows 桌面向导 c++ 3.命令行控制台一闪而过.这是我们使用空文件夹加载的项目,默认不是控制台应用程序,新建控 ...
docker常用命令详解
docker常用命令详解本文只记录docker命令在大部分情境下的使用,如果想了解每一个选项的细节,请参考官方文档,这里只作为自己以后的备忘记录下来. 根据自己的理解,总的来说分为以下几种: Doc ...

hadoop_hdfs命令

hadoop_hdfs命令相关推荐

最新文章

热门文章