Hadoop HDFS 基本命令

hadoop fs 具体命令

hadoop fs

-help：输出这个命令参数 hadoop fs ‐help cat

ls: 显示目录信息hadoop fs ‐ls /

4.- mkdir：在HDFS上创建目录 hadoop fs -mkdir -p /cjyy/test

5.moveFromLocal：从本地剪切粘贴到HDFS

touch t2.txt hadoop fs ‐moveFromLocal t2.txt /cjy

6. appendToFile：追加一个文件到已经存在的文件末尾

touch chen.txt

vi chen.txt

输入测试追加文件到末尾

hadoop fs ‐appendToFile chen.txt /t1.txt

7. -cat：显示文件内容

hadoop fs -cat /t1.txt

8. -chgrp 、-chmod、-chown：Linux文件系统中的用法一样，修改文件所属权限

hadoop fs ‐chmod 666 /t1.txt

hadoop fs -chown cjy:cjy /t1.txt

9. -copyFromLocal：从本地文件系统中拷贝文件到HDFS路径去

hadoop fs ‐copyFromLocal chen.txt /

10. -copyToLocal：从HDFS拷贝到本地

hadoop fs ‐copyToLocal /t1.txt /

11. -cp ：从HDFS的一个路径拷贝到HDFS的另一个路径

hadoop fs ‐cp /cjy /t2.txt /test

12. -mv：在HDFS目录中移动文件

hadoop fs -mv /t1.txt /test1

13. -get：等同于copyToLocal，就是从HDFS下载文件到本地

hadoop fs -get /cjy.txt /

14. -getmerge：合并下载多个文件，比如HDFS的目录 /user/atguigu/test下有多个文

件:log.1, log.2,log.3,...

hadoop fs ‐getmerge /test /* /hoddo.txt

15. -put：等同于copyFromLocal

hadoop fs -put /ss.txt /

16. -tail：显示一个文件的末尾

hadoop fs ‐tail /test/t1.txt

17. -rm：删除文件或文件夹

hadoop fs ‐rm /ss.txt

18. -rmdir：删除空目录

19.-du统计文件夹的大小信息

20.-setrep：设置HDFS中文件的副本数量

Hadoop HDFS 基本命令相关推荐

2.Hadoop HDFS 安装配置
1.将hadoop包解压放到/opt/hadoop下 2.配置 2.1.进入hadoop目录 2.2.编辑hadoop.env.sh文件配置jdk环境变量 #vi etc/hadoop/hadoop ...
HDFS基本命令及上传文件API
一.HDFS基本命令行操作: 1.HDFS集群修改SecondaryNameNode位置到hd09-2(1)修改hdfs-site.xml<configuration>//配置元数据存储位 ...
什么是Hadoop - HDFS - MapReduce - YARN - HA
Hadoop 为什么要有Hadoop? 从计算机诞生到现今,积累了海量的数据,这些海量的数据有结构化.半结构化.非结构的数据,并且这些海量的数据存储和检索就成为了一大问题. 我们都知道大数据技术难题 ...
Hadoop HDFS文件操作的Java代码
1.创建目录 import java.io.IOException; import org.apache.hadoop.conf.Configuration; import org.apache.ha ...
bboss hadoop hdfs大数据抽取工具
bboss大数据抽取工具功能特点如下: 实现db到hadoop hdfs数据导入功能,提供高效的分布式并行处理能力,可以采用数据库分区.按字段分区.分页方式并行批处理抽取db数据到hdfs文件系统中: ...
org.apache.hadoop.hdfs.server.datanode.DataNode: Exception in receiveBlock for block
Hbase依赖的datanode日志中如果出现如下报错信息:DataXceiverjava.io.EOFException: INFO org.apache.hadoop.hdfs.server.da ...
JAVA程序连接hadoop HDFS服务报无法连接。
2019独角兽企业重金招聘Python工程师标准>>> 在虚拟机部署hadoop的HDFS系统,在centos系统中敲各种操作命令,对文件读取.上传.删除等都没什么问题.但用JAVA ...
Linux下Hadoop hdfs Java API使用
0 前言搞了大约2天时间终于把Linux下面Java API的使用给弄清楚了.做个笔记方便以后参考.环境如下所示 Hadoop:2.5.1 Linux:Ubuntu kylin eclipse:lu ...
Hadoop HDFS概念学习系列之熟练掌握HDFS的Shell访问（十五）
调用文件系统(FS)Shell命令应使用 $HADOOP_HOME/bin/hadoop fs *** 的形式!!! 所有的FS Shell命令使用URI路径作为参数. URI格式是scheme:/ ...

Hadoop HDFS 基本命令

Hadoop HDFS 基本命令

Hadoop HDFS 基本命令相关推荐

最新文章

热门文章