Hadoop端口介绍及各种启动命令列表

Hadoop端口介绍

9000 namenode的常用端口给机子
8020 namenode的RPC调用端口（接收Client连接的RPC端口，用于获取文件系统metadata信息）
50070 namenode http HDFS查看端口 web
50470 https 查看HDFS端口
50090 secondaryNamenode
8088 ResourceManager YARN集群端口
8089 Web Application Proxy web代理
10020 JobHistory(host)
19888 JobHistory (web)
8030-8033 resourcemanage组件

Hadoop各种启动命令列表

Start-all.sh/Stop-all.sh 开启关闭所有进程

Start-dfs.sh 开启hdfs 进程

Start-yarn.sh 开启yarn进程

Hadoop namenode –format 对HDFS进行格式化

hadoop-daemon.sh start namenode 单独启动namenode

hadoop-daemons.sh start datanode 单独启动datanode

yarn-daemon.sh start resourcemanager 启动resourcemanager

yarn-daemons.sh start nodemanager 启动nodemanager

yarn-daemon.sh start proxyserver 启动yarn日志代理服务

mr-jobhistory-daemon.sh start historyserver 启动MR的jobhistory服务历史服务器开启

Hadoop的基准测试

Yarn jar hadoop-mapreduce-client-joblient-tests.jar TestDFSIO –write
–nrFiles 10 –size 1000MB
Yarn jar hadoop-mapreduce-client-joblient-tests.jar TestDFSIO –read
–nrFiles 10 –size 1000MB
Yarn jar hadoop-mapreduce-client-joblient-tests.jar TestDFSIO –clean

Hadoop端口介绍及各种启动命令列表相关推荐

hadoop常用的启动命令
本人三台节点:hadoop01,hadoop02,hadoop03(部署hive,mysql) 默认jdk,zookeeper,hadoop,hbase,kafka,flume,hue,spark已经 ...
计算机端口介绍[详细列表]
计算机端口介绍[详细列表] 端口:0 服务:Reserved 说明:通常用于分析操作系统.这一方法能够工作是因为在一些系统中"0"是无效端口,当你试图使用通常的闭合端口连接它时将产 ...
hadoop启动命令 start-all.sh失效解决办法
很多人在配置好了hadoop集群后,输入启动命令 start-all.sh 时,报错:This script is Deprecated. Instead use start-dfs.sh and s ...
启动容器后，即便映射了端口，使用docker ps 命令查看，ports列也是空
问题启动容器后,即便映射了端口,使用docker ps 命令查看,ports列也是空的,如下图可能是docker网络没有配置好简单排查问题 1.查看容器的网络配置 docker inspect ...
Hadoop启动命令
下载hadoop并解压配置hdfs 修改配置文件etc/hadoop/hadoop-env.sh JAVA_HOME=/home/middleware/jdk 修改配置文件etc/hadoop/co ...
hadoop与hbase启动命令
**hadoop与hbase启动命令** hadoop启动关闭命令: 先进入到Hadoop的安装目录,例如cd /opt/hadooop 启动命令:./sbin/start-dfs.sh 关闭命令:. ...
04_Flink-HA高可用、Standalone集群模式、Flink-Standalone集群重要参数详解、集群节点重启及扩容、启动组件、Flink on Yarn、启动命令等
1.4.Flink集群安装部署standalone+yarn 1.4.1.Standalone集群模式 1.4.2.Flink-Standalone集群重要参数详解 1.4.3.集群节点重启及扩容 1 ...
Hadoop HDFS概念学习系列之shell命令使用HDFS的一些其他命令（十九）
其他相关命令还包括以下这些: NameNode -format : 格式化DFS文件系统 secondaryNameNode : 运行DFS的SecndaryNameNode进程 NameNo ...
linux查看端口物理状态,Linux查看端口使用状态及启动
LINUX网络性能之管理工具三剑客本文是介绍管理Linux查看端口这些输出信息,该命令将显示从每个数据包传出的头和来自主机hostname对端口80的编址. Netstat -tln 命令是Linu ...

Hadoop端口介绍及各种启动命令列表

Hadoop端口介绍

Hadoop各种启动命令列表

Hadoop的基准测试

Hadoop端口介绍及各种启动命令列表相关推荐

最新文章

热门文章