博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
Hbase源码分析:Hbase UI中Requests Per Second的具体含义
阅读量:4916 次
发布时间:2019-06-11

本文共 2387 字,大约阅读时间需要 7 分钟。

  让运维加监控,被问到Requests Per Second(见下图)的具体含义是什么?我一时竟回答不上来,虽然大概知道它是指每秒Region Server的请求数,但是具体是怎么算的呢,不清楚。于是决定通过研究源码深入了解下。下面便记录了这个过程。

 

1,先在代码库中全局搜索Requests Per Second关键字,发现在几个jamon结尾的文件找到了。于是google了一下,这个到底是什么东东,发现是一个模板引擎。

2,查看RegionServerListTmpl.jamon内容,需要传入参数List<ServerName> servers和HMaster master。并且这个模板引擎是在MasterStatusServlet.java的doGet方法中被render的。抛开这些,看下面一段代码,就知道Requests Per Second是怎么来的呢?

1 <%java> 2     int totalRegions = 0; 3     int totalRequests = 0; 4     for (ServerName serverName: serverNames) { 5  6     ServerLoad sl = master.getServerManager().getLoad(serverName); 7     double requestsPerSecond = 0.0; 8     int numRegionsOnline = 0; 9 10     if (sl != null) {11         requestsPerSecond = sl.getRequestsPerSecond();12         numRegionsOnline = sl.getNumberOfRegions();13         totalRegions += sl.getNumberOfRegions();14         // Is this correct?  Adding a rate to a measure.15         totalRequests += sl.getNumberOfRequests();16     }17     long startcode = serverName.getStartcode();18 

其中requestsPerSecond变量的值就是我们要找的。可以看出来是来自ServerLoad中的getRequestsPerSecond函数。

3,继续查看ServerLoad中的getRequestsPerSecond函数,经过getRequestsPerSecond-》getNumberofRequests发现是serverLoad.getNumberOfRequests中的numberOfRequests_变量的值。

4,  那ClusterStatusProtos.ServerLoad中的numberOfRequests_是怎么来的呢?在HRegionServer中buildServerLoad函数中,可以看到是从MetricsRegionServerWrapperImpl中的requestsPerSecond获取的

1 serverLoad.setNumberOfRequests((int) regionServerWrapper.getRequestsPerSecond());

5,那MetricsRegionServerWrapperImpl中的requestsPerSecond是怎么算的呢?从下面代码可以看出是根据上次的总的请求次数和请求时间,以及当前总的请求次数和请求时间,通过相减,然后除以时间差计算出来的。

if (lastRan == 0) {        lastRan = currentTime - period;      }      //If we've time traveled keep the last requests per second.      if ((currentTime - lastRan) > 0) {        long currentRequestCount = getTotalRequestCount();        requestsPerSecond = (currentRequestCount - lastRequestCount) /            ((currentTime - lastRan) / 1000.0);        lastRequestCount = currentRequestCount;      }      lastRan = currentTime;

6,getTotalRequestCount()返回的是regionServer.rpcServices.requestCount的值。而requestCount表示的是regionserver中rpcserver记录的rpc请求次数,每当一个rpc请求(比方说flush,getOnlineRegion等)过来的时候,这个值便会加1. 至此,便很清楚了,Requests Per Second具体的含义就是当前region server中每秒接收到的rpc请求数。

小结:

通过以上分析过程,搞清楚了Requests Per Second的具体含义,感觉结果不是很重要,重要的是过程,通过查看,调试源码深入了解hbase的细节。

转载于:https://www.cnblogs.com/superhedantou/p/5850549.html

你可能感兴趣的文章
jsp编译、执行过程
查看>>
NOIP2017游记
查看>>
关于js的在ie和Firefox的差别
查看>>
node-webkit无边框窗口用纯JS实现拖动改变大小
查看>>
Extjs grid combo
查看>>
获取<考试>博文密码!o(*≧▽≦)ツ
查看>>
学习进度条
查看>>
leetcode-Subsets II-90
查看>>
In 和Exists
查看>>
shell 命令下载软件 安装软件
查看>>
LCA的五种解法
查看>>
Python 拓展之详解深拷贝和浅拷贝
查看>>
JavaScript备忘录-闭包
查看>>
词频统计报告
查看>>
Java NIO系列教程(十一) Pipe
查看>>
串口屏的特点和开发步骤 + 最好的串口屏产品推荐 .....!
查看>>
蓝桥校内选拔赛B题(不一定正确)
查看>>
数据验证
查看>>
JAVAWeb---HttpServletResponse中的方法
查看>>
一个不错的界面原型制作工具(Balsamiq Mockups)
查看>>