Hbase源码分析：Hbase UI中Requests Per Second的具体含义

　　让运维加监控，被问到Requests Per Second（见下图）的具体含义是什么?我一时竟回答不上来，虽然大概知道它是指每秒Region Server的请求数，但是具体是怎么算的呢，不清楚。于是决定通过研究源码深入了解下。下面便记录了这个过程。

1，先在代码库中全局搜索Requests Per Second关键字，发现在几个jamon结尾的文件找到了。于是google了一下，这个到底是什么东东，发现是一个模板引擎。

2，查看RegionServerListTmpl.jamon内容，需要传入参数List<ServerName> servers和HMaster master。并且这个模板引擎是在MasterStatusServlet.java的doGet方法中被render的。抛开这些，看下面一段代码，就知道Requests Per Second是怎么来的呢？

 1 <%java>2     int totalRegions = 0;3     int totalRequests = 0;4     for (ServerName serverName: serverNames) {5 6     ServerLoad sl = master.getServerManager().getLoad(serverName);7     double requestsPerSecond = 0.0;8     int numRegionsOnline = 0;9
10     if (sl != null) {
11         requestsPerSecond = sl.getRequestsPerSecond();
12         numRegionsOnline = sl.getNumberOfRegions();
13         totalRegions += sl.getNumberOfRegions();
14         // Is this correct?  Adding a rate to a measure.
15         totalRequests += sl.getNumberOfRequests();
16     }
17     long startcode = serverName.getStartcode();
18 </%java>

其中requestsPerSecond变量的值就是我们要找的。可以看出来是来自ServerLoad中的getRequestsPerSecond函数。

3，继续查看ServerLoad中的getRequestsPerSecond函数，经过getRequestsPerSecond-》getNumberofRequests发现是serverLoad.getNumberOfRequests中的numberOfRequests_变量的值。

4, 那ClusterStatusProtos.ServerLoad中的numberOfRequests_是怎么来的呢？在HRegionServer中buildServerLoad函数中，可以看到是从MetricsRegionServerWrapperImpl中的requestsPerSecond获取的

1 serverLoad.setNumberOfRequests((int) regionServerWrapper.getRequestsPerSecond());

5，那MetricsRegionServerWrapperImpl中的requestsPerSecond是怎么算的呢？从下面代码可以看出是根据上次的总的请求次数和请求时间，以及当前总的请求次数和请求时间，通过相减，然后除以时间差计算出来的。

if (lastRan == 0) {lastRan = currentTime - period;}//If we've time traveled keep the last requests per second.if ((currentTime - lastRan) > 0) {long currentRequestCount = getTotalRequestCount();requestsPerSecond = (currentRequestCount - lastRequestCount) /((currentTime - lastRan) / 1000.0);lastRequestCount = currentRequestCount;}lastRan = currentTime;

6，getTotalRequestCount()返回的是regionServer.rpcServices.requestCount的值。而requestCount表示的是regionserver中rpcserver记录的rpc请求次数，每当一个rpc请求（比方说flush，getOnlineRegion等）过来的时候，这个值便会加1. 至此，便很清楚了，Requests Per Second具体的含义就是当前region server中每秒接收到的rpc请求数。

小结：

通过以上分析过程，搞清楚了Requests Per Second的具体含义，感觉结果不是很重要，重要的是过程，通过查看，调试源码深入了解hbase的细节。

Hbase源码分析：Hbase UI中Requests Per Second的具体含义相关推荐

HBase源码分析之HRegion上compact流程分析（三）
在<HBase源码分析之HRegion上compact流程分析(二)>一文中,我们没有讲解真正执行合并的CompactionContext的compact()方法.现在我们来分析下它的具体 ...
lodash源码分析之compact中的遍历
小时候, 乡愁是一枚小小的邮票, 我在这头, 母亲在那头. 长大后,乡愁是一张窄窄的船票, 我在这头, 新娘在那头. 后来啊, 乡愁是一方矮矮的坟墓, 我在外头, 母亲在里头. 而现在, 乡愁是一湾浅 ...
apollo源码分析感知_Kitty中的动态线程池支持Nacos,Apollo多配置中心了
目录回顾昨日 nacos 集成 Spring Cloud Alibaba 方式 Nacos Spring Boot 方式 Apollo 集成自研配置中心对接无配置中心对接实现源码分析兼容 A ...
「源码分析」CopyOnWriteArrayList 中的隐藏知识，你Get了吗？
前言本觉 CopyOnWriteArrayList 过于简单,寻思看名字就能知道内部的实现逻辑,所以没有写这篇文章的想法,最近又仔细看了下 CopyOnWriteArrayList 的源码实现,大体 ...
lodash源码分析之baseFindIndex中的运算符优先级
我悟出权力本来就是不讲理的--蟑螂就是海米:也悟出要造反,内心必须强大到足以承受任何后果才行. --北岛<城门开> 本文为读 lodash 源码的第十篇,后续文章会更新到这个仓库中,欢迎 ...
[pig4cloud框架源码分析] 03 - MyBatis中的sql语句日志打印
文章目录导读 pig4cloud框架配置 Mybatis Log Plugin 插件开启方式插件说明 [TODO]源码分析拦截器方案实现sql日志查看参考资料导读使用MyBatis开发过程 ...
UGUI源码分析：LayoutGroup中的纵横布局组件（HorizontalOrVerticalLayoutGroup）
系列 UGUI源码分析系列总览相关前置: UGUI CanvasUpdateSystem源码分析 UGUI源码分析:LayoutSystem布局系统文章目录系列 UML图一览 LayoutGro ...
HBase源码分析：HTable put过程
HBase版本:0.94.15-cdh4.7.0 在 HBase中,大部分的操作都是在RegionServer完成的,Client端想要插入.删除.查询数据都需要先找到相应的 RegionServer ...
【FFMPEG源码分析】ffmpeg中context与AVClass，AVOption之间的关系
通过前面三篇文章的分析大致了解了ffmpeg中demuxer/decoder模块的内部大致结构和数据处理流程.在阅读源码的过程中经常会看到XXXContext,AVClass xxx_class, A ...

Hbase源码分析：Hbase UI中Requests Per Second的具体含义

Hbase源码分析：Hbase UI中Requests Per Second的具体含义

1，先在代码库中全局搜索Requests Per Second关键字，发现在几个jamon结尾的文件找到了。于是google了一下，这个到底是什么东东，发现是一个模板引擎。

2，查看RegionServerListTmpl.jamon内容，需要传入参数List<ServerName> servers和HMaster master。并且这个模板引擎是在MasterStatusServlet.java的doGet方法中被render的。抛开这些，看下面一段代码，就知道Requests Per Second是怎么来的呢？

3，继续查看ServerLoad中的getRequestsPerSecond函数，经过getRequestsPerSecond-》getNumberofRequests发现是serverLoad.getNumberOfRequests中的numberOfRequests_变量的值。

4, 那ClusterStatusProtos.ServerLoad中的numberOfRequests_是怎么来的呢？在HRegionServer中buildServerLoad函数中，可以看到是从MetricsRegionServerWrapperImpl中的requestsPerSecond获取的

5，那MetricsRegionServerWrapperImpl中的requestsPerSecond是怎么算的呢？从下面代码可以看出是根据上次的总的请求次数和请求时间，以及当前总的请求次数和请求时间，通过相减，然后除以时间差计算出来的。

小结：

通过以上分析过程，搞清楚了Requests Per Second的具体含义，感觉结果不是很重要，重要的是过程，通过查看，调试源码深入了解hbase的细节。

Hbase源码分析：Hbase UI中Requests Per Second的具体含义相关推荐

最新文章

热门文章