Hadoop入门之命令参考

在“$HADOOP_HOME/bin/hadoop fs” 里有更多的命令。./bin/hadoop DFS 列出所有可以使用在FsShell系统上运行的命令。此外，$HADOOP_HOME/bin/hadoop fs -help 命令名称会显示一个简短的用法。

所有表的操作如下所示。以下是使用参数一般方式：

"<path>" means any file or directory name.
"<path>..." means one or more file or directory names.
"<file>" means any filename.
"<src>" and "<dest>" are path names in a directed operation.
"<localSrc>" and "<localDest>" are paths as above, but on the local file system.

所有其他文件和路径名是指HDFS内部的对象。

1.	ls <path> 列出路径指定的目录中的内容，示出了名称，权限，拥有者，大小和修改日期的每个条目。
2.	lsr <path> 行为类似于-ls，但递归显示路径的所有子目录项。
3.	du <path> 显示磁盘使用率，以字节为单位，对所有的文件，这些文件匹配的路径;文件名报告使用完整HDFS协议前缀。
4.	dus <path> 类似-du，但打印路径中的所有文件/目录的磁盘使用情况的摘要。
5.	mv <src><dest> 通过移动表示src到dest，在HDFS的文件或目录。
6.	cp <src> <dest> 在HDFS复制确定src中的文件或目录到dest。
7.	rm <path> 删除文件或路径标识的空目录。
8.	rmr <path> 删除路径标识的文件或目录。递归删除所有子条目（例如，文件或路径的子目录）。
9.	put <localSrc> <dest> 从本地localSrc文件系统中的DFS标识文件或目录内复制到dest。
10.	copyFromLocal <localSrc> <dest> 等同于-put
11.	moveFromLocal <localSrc> <dest> 从标识 localSrc本地文件系统中的文件或目录中HDFS复制到dest，然后删除本地副本上成功。
12.	get [-crc] <src> <localDest> 拷贝标识 src 来确定localDest本地文件系统路径HDFS文件或目录。
13.	getmerge <src> <localDest> 检索匹配的路径的src HDFS中的所有文件，并将它们复制合并文件到标识localDest本地文件系统中。
14.	cat <filen-ame> 显示在标准输出文件名的内容。
15.	copyToLocal <src> <localDest> 等同于 -get
16.	moveToLocal <src> <localDest> 工作方式类似于-get，但删除HDFS复制成功。
17.	mkdir <path> 在创建一个HDFS命名的目录路径。创建任何父目录的路径丢失（例如，命令mkdir-p在Linux中）。
18.	setrep [-R] [-w] rep <path> 设置标识路径代表文件的目标文件复制因子。（实际的复制因子会向着随着时间的推移目标移动）
19.	touchz <path> 创建在路径包含当前时间作为时间戳的文件。失败如果文件已经存在于路径，除非文件已经大小为0。
20.	test -[ezd] <path> 返回1，如果路径存在;长度为零;或者是一个目录，否则为0。
21.	stat [format] <path> 打印有关的路径信息。格式是接受块文件大小（％b），文件名（％n），块大小（%o），复制（％r）和修改日期（％y，％Y）的字符串。
22.	tail [-f] <file2name> 显示在标准输出文件的最后1KB。
23.	chmod [-R] mode,mode,... <path>... 变化符合路径标识的一个或多个对象关联的文件权限....递归执行变更与R.模式是3位八进制模式，或{augo}+/-{rwxX}。假设如果没有指定范围，则不适用umask。
24.	chown [-R] [owner][:[group]] <path>... 设置拥有用户和/或组标识路径的文件或目录....设置所有者递归，如果指定-R。
25.	chgrp [-R] group <path>... 设置所属组标识路径的文件或目录....设置组递归，如果指定-R。
26.	help <cmd-name> 返回使用上面列出的命令之一信息。必须省略了'-' 字符在cmd。

注：不同版本的hadoop可能命令会有些不同，可以使用（命令+-help）的形式获取该命令具体形式

转自：http://www.yiibai.com/hadoop/hadoop_command_reference.html

Hadoop入门之命令参考相关推荐

Linux 常用命令参考手册, 非常适合入门, 基本能满足工作日常使用。
Linux Manual Linux 常用命令参考手册, 非常适合入门, 基本能满足工作日常使用. 截止目前,含有 65+ 命令. 注:这里只列出常用命令, 如果想要更系统的可能需要翻阅官方手册. 目 ...
Hadoop命令参考
Hadoop命令参考在"$HADOOP_HOME/bin/hadoop fs" 里有更多的命令../bin/hadoop DFS 列出所有可以使用在FsShell系统上运行的命令 ...
Hadoop入门基础教程 Hadoop之单词计数
单词计数是最简单也是最能体现MapReduce思想的程序之一,可以称为MapReduce版"Hello World",该程序的完整代码可以在Hadoop安装包的src/exampl ...
[学习笔记]黑马程序员-Hadoop入门视频教程
文章目录参考资料第一章:大数据导论与Linux基础(p1-p17) 1.1 大数据导论 1.1.1 企业数据分析方向 1.1.2 数据分析基本流程步骤明确分析的目的和思路数据收集数据处理数 ...
hadoop入门教程免费下载
Hadoop入门教程免费下载,学习大数据的小伙伴应该都知道Hadoop是必须要接触的,学习大数据,从Hadoop入门教程开始. Hadoop是什么? 首先我们了解到Hadoop是Apache软件基金会 ...
分布式计算开源框架Hadoop入门实践
在SIP项目设计的过程中,对于它庞大的日志在开始时就考虑使用任务分解的多线程处理模式来分析统计,在我从前写的文章<Tiger Concurrent Practice --日志分析并行分解设计与实 ...
安装完Hadoop之后，命令行输入hadoop或hdfs却找不到命令的解决方法
安装完Hadoop之后,命令行输入hadoop或hdfs却找不到命令的解决方法参考文章: (1)安装完Hadoop之后,命令行输入hadoop或hdfs却找不到命令的解决方法 (2)https:// ...
Hadoop入门（二）集群安装
一.集群安装条件前置在虚拟机上先准备一个机子按用前面[安装单机hadoop] 已完成安装jdk,hadoop和ssh.网络等配置环境等. 虚拟机和操作系统环境:ubuntu14 + hadoo ...
Hadoop之Shell命令
hadoop的shell命令与linux下的命令类似,一般要在命名了的前面加-, 例如:hadoop fs -ls /....... 具体如下: FS Shell 调用文件系统(FS)Shell命令应 ...
Hadoop入门基础教程 Hadoop之完全分布式环境搭建
上一篇我们完成了Hadoop伪分布式环境的搭建,伪分布式模式也叫单节点集群模式, NameNode.SecondaryNameNode.DataNode.JobTracker.TaskTracker所 ...

Hadoop入门之命令参考

Hadoop入门之命令参考相关推荐

最新文章

热门文章