linux 查看hadoop命令大全,linux下hadoop集群常用命令
1.上传文件
1)hadoop fs -put words.txt /path/to/input/
2)hdfs dfs -put words.txt /path/wc/input/
2.获取hdfs中的文件
hadoop fs -get /path/wc/input/words.txt
3.合并下载多个文件
hadoop fs -getmerge /path/wc/input/words.txt /path/wc/input/words2.txt
4.查看某目录下所含文件
1)hadoop fs -ls /path/wc/input/
2)hadoop fs -ls hdfs://node1:9000/path/wc/input/
5.查看文件内容
hadoop fs -cat /path/wc/input/words.txt
6.显示一个文件的末尾
hadoop fs -tail /weblog/test.log
7.以字符形式打印一个文件的内容
hadoop fs -text /weblog/test.log
8.在hdfs上创建目录
hadoop fs -mkdir -p /aaa/bbb/cc/dd
9.从本地剪切粘贴到hdfs
hadoop fs -moveFromLocal /home/hadoop/a.txt /aaa/bbb/cc/dd
10.从hdfs剪切粘贴到本地
hadoop fs -moveToLocal /aaa/bbb/cc/dd /home/hadoop/a.txt
11.从本地文件系统中拷贝文件到hdfs路径去
hadoop fs -copyFromLocal /home/hadoop/a.txt /aaa/bbb/cc/dd
12.从hdfs拷贝到本地
hadoop fs -copyToLocal /aaa/bbb/cc/dd /home/hadoop/a.txt
13.从hdfs的一个路径拷贝hdfs的另一个路径
hadoop fs -cp /aaa/test1.txt /bbb/test2.txt
14.在hdfs目录中移动文件
hadoop fs -mv /aaa/jdk.tar.gz /
15.追加一个文件到已经存在的文件末尾
1)hadoop fs -appendToFile hello.txt hdfs://node1:9000/hello.txt
2)hadoop fs -appendToFile hello.txt /hello.txt
16.离开hadoop的 安全模式(系统处于只读状态,namenode不会处理任何块的复制和删除命令)
hadoop dfsadmin -safemode leave
17.删除目录及其里面内容
hadoop fs -rmr /path/wc/input/words.txt
18.删除空目录
hadoop fs -rmdir /aaa/bbb/ccc
19.与linux文件系统中的用法一样,对文件所属权限
1)hadoop fs -chmod 666 /hello.txt
2)hadoop fs -chown someuser:somegrp /hello.txt
20.统计文件系统的可用空间信息
hadoop fs -df -h /
21.统计文件夹的大小信息
hadoop fs -du -s -h /aaa/*
22.统计一个指定目录下的文件节点数量
hadoop fs -count /aaa/
23.设置hdfs中文件的副本数量
hadoop fs -setrep 3 /aaa/test.txt
linux 查看hadoop命令大全,linux下hadoop集群常用命令相关推荐
- [Oracle 11g r2(11.2.0.4.0)]RAC集群常用命令
文章摘自于 http://blog.csdn.net/tianlesoftware/article/details/5358573. Oracle Clusterware的命令集可以分为以下4种: 节 ...
- Oracle Rac集群常用命令总结(crsctl和srvctl详解)
一.Oracle Rac常用命令 cat /etc/hosts cd $ORACLE_HOME/bin/ 1--查询 --检查集群中各组件状态 olsnodes -s --查看集群名称 cemutl ...
- redis集群常用命令
总结 1. 查看redis是否是集群模式,info cluster 命令 2. 查看集群的所有节点信息,cluster nodes 命令 3. 查看集群中各个节点的slot区间,cluster slo ...
- docker集群(3):集群常用命令
文章目录 集群swarm node命令 service命令 集群swarm 创建集群 docker swarm init --advertise-addr 172.31.8.231 #创建集群 生成令 ...
- linux下hadoop集群常用命令
1.上传文件 1)hadoop fs -put words.txt /path/to/input/ 2)hdfs dfs -put words.txt /path/wc/input/ 2.获取hdfs ...
- Linux查看CPU,硬盘型号和端口占用等常用命令
1. 关闭防火墙 service iptables stop 2. 查看防火墙状态 firewall -cmd --state 3. 查看端口是否被占用 netstat -an|grep 端口号 4. ...
- Hadoop集群常用命令
hadoop 上传文件 hadoop fs -put a.txt /a/b 下载文件 hadoop fs -get /a/b/* ./ 查看文件 hadoop fs -ls /a/b 递归删除文件夹 ...
- android命令大全 pdf,android调试桥(adb)常用命令.pdf
Android 调试桥 (adb) 是多种用途的工具,该工具可以帮助你管理设备或模拟器的状态. 可以通过下列几种方法加入 adb: 在设备上运行 shell 命令 通过端口转发来管理模拟器或设备 从模 ...
- centos查看盘符_Centos下磁盘管理的常用命令记录(如查找大文件)
Centos下磁盘管理的常用命令记录 查看系统磁盘空间占用,使用命令: df -h 结果: 查看磁盘inode使用情况,如果inode用完了,磁盘就没法写入新的内容了: df -i 结果: 如何查找磁 ...
最新文章
- 【深度学习】像素级分割网络新思路之DeepLabv3+
- Android dependency 'com.android.support:support-v4' has different version for the compile (26.1.0...
- [Leedcode][JAVA][第102题][二叉树的层序遍历][递归][迭代][BFS]
- gui界面如何和内核链接 python_专栏 | 除了内核程序,Abaqus还能这样做二次开发...
- SharePoint 2013 配置启用搜索服务
- 【操作系统】进程的异步性
- 浅谈《原神》中的图形渲染技术
- c51单片机期末复习个人总结1基础知识
- 较全的国外学术论文网站与常用的学术搜索引擎
- X站全称是什么_B站课程排行榜,当代大学生最爱学什么?
- linux中svn卸载,linux svn 安装 配置 及 卸载
- 百度地图查询数据结果
- Qt中setPlainText()和setText()有什么区别?
- 2019年人工智能研发热点回眸
- win7 修改服务器属性,win7打印机服务器属性设置
- 二、PC连接上tello edu并通过python进行简单控制
- 服务器异常流量导致性能下降怎么解决,云服务器查看异常流量
- 按键精灵DNF脚本开发第二季
- 利用机器学习方法检测识别TLS加密恶意流量
- 细数储层预测过程中碰到的的几类采集脚印
热门文章
- 开发人员不得不知的MySQL索引和查询优化
- Oracle 19c 新特性:ADG的自动DML重定向增强读写分离
- innodb实例损坏情况下恢复数据及相关工具的开发
- 关于看板方法,你需要知道的几件事
- 带你全面的了解二叉树
- JavaScript中的正则表达式详解
- 数据库“意外失联”?华为云DRS异地多活灾备为您支招
- 给一线讲产品·8期|VPC、子网、安全组,是什么关系?
- 【华为大咖分享】4.反脆弱,高效能组织的能力构建(后附PPT下载地址)
- 红帽linux怎么装文件夹,红帽linux怎么安装第三方字体?