hdfs web_ui深入讲解、服务启动日志分析、NN SNN关系

hdfs启动顺序：

1、namenode

2、datenode

3、secondnamenode

4、yarn

webui:

默认为50070端口，dfsheath

ui内容讲解：

ClusterID: namenode格式化时生成的（hdfs namenode -format）

BlockpoolID：数据块池

（为了federation 和内存管理使用。）

namenode Journal status:

就是edit日志

namenode storage：

镜像文件存储信息

启动日志文件目录 $HADOOP_HOME/logs：

x.log: 通过log4j记录，记录大部分应用程序的日志信息

x.out 记录标准输出和标准错误日志，少量记录

日志文件的命名规则：

[ 框架名称- 用户名- 进程名- 主机名--日志格式后缀 ]

Secondary namenode:

1、客户端对hdfs的操作会记录到edits文件中，即journal 。

2、namenode 内存中的内容为 fsimage+edits

3、 namenode 的fsimage和edite文件定时合并后，同步到secondary namenode上。

hdfs web_ui深入讲解、服务启动日志分析、NN SNN关系相关推荐

hdfs web_ui深入讲解、服务启动日志分析、NN SNN关系
hdfs启动顺序: 1.namenode 2.datenode 3.secondnamenode 4.yarn webui: 默认为50070端口,dfsheath ui内容讲解: ClusterID ...
日志服务与日志分析工具
系统日志生成服务功能: 日志服务是根据日志配置文件进行提供相应的功能服务,对于各种服务的信息等级的设定将不同服务的不懂等级信息记录在不同的文件里面. 日志管理服务分类: 1.rsyslogd 普通日 ...
LS1021ATWR开发板启动日志分析
一.背景 LS1021ATWR开发板运行官方的openwrt系统二.日志分析 2.1 linux相关日志 root@OpenWrt:/# reboot 重启 root@OpenWrt:/# [ 2 ...
启动日志_Hybris服务器启动日志分析
build文件检测,使用b2c_acc recipit启动服务器:/home/jerrywang/Hybris/installer/recipes/b2c_acc/build.gradle The T ...
Hybris服务器启动日志分析
build文件检测,使用b2c_acc recipit启动服务器:/home/jerrywang/Hybris/installer/recipes/b2c_acc/build.gradle The T ...
服务启动日志时间跟系统时间不相符问题
jar启动方式在启动脚本-Duser.timezone=GMT+08添加该语句即可. 如果是tomcat启动在bin/catalina.sh文件中添加 set -Duser.time ...
notes服务器日志文件,邮件服务器之日志分析（五）
### 邮件服务器(mail.unotes.co)收到 test01\@unotes.co 发送给 test.redhat\@gmail.com 邮件的日志 ```bash $ tail -f /va ...
RV1126 Linux系统开机启动日志分析（开机异常）
DDR Version V1.08 20210825 LPDDR3, 328MHz //ddr类型是LPDDR4X,最高频率2112MHz //DDR 1个通道每个通道1024MB容量,总共1G容量 ...
Spark配置启动脚本分析
2019独角兽企业重金招聘Python工程师标准>>> 今天想停止spark集群,发现执行stop-all.sh的时候spark的相关进程都无法停止.提示: no org.apach ...

hdfs web_ui深入讲解、服务启动日志分析、NN SNN关系

hdfs web_ui深入讲解、服务启动日志分析、NN SNN关系相关推荐

最新文章

热门文章