美文网首页
HBase监控面面观

HBase监控面面观

作者: sparkle123 | 来源:发表于2020-08-07 20:05 被阅读0次

HBase Web-UI

HBase自带的Web UI上Region单位的 Read Request Count/Write Request Count,不过这只是个累计值。

Region Load Data in Recent One Minute

https://hb-xxxx-nginx-master1-001.hbase.rds.aliyuncs.com/master-1/topregion.jsp

顾名思意:Region Load Data in Recent One Minute,查看最近一分钟的Region上分布的表的每秒读/写次数。

Region Load Data in Recent One Minute.png

小时-日-周-月-年 维度监控表的读写情况(aggregate graphs)

https://hb-xxx-nginx-master1-001.hbase.rds.yyyy.com/gl/ganglia/aggregate_graphs.php
来自"咖喱鸭".png
regionserver.Tables.namespacne_{Namespace}_table_{tablename}_metric_readRequestCount
regionserver.Tables.namespace_{Namespace}_table_{tablename}_metric_writeRequestCount
小时-日-周-月-年 维度.png

MyGrid Grid-->hbase_cluster

以node为单位,时间维度观测metrics指标信息

https://hb-xxxxxx-nginx-master1-001.hbase.rds.aliyuncs.com/gl/ganglia/?r=month&cs=&ce=&c=hbase_cluster&h=&tab=m&vn=&hide-hf=false&m=regionserver.Tables.Namespace_namespace_table_tablename_metric_totalRequestCount&sh=1&z=small&hc=4&host_regex=&max_graphs=0&s=by+name
image.png image.png

Put/Get RT

image.png image.png image.png

从监控上看,hbase get key的时间非常短,999在1~2ms之间,不过有很多客户端代码逻辑中耗时较多的操作,如多次遍历获取一条记录的多个column,创建HBase Connection,scan多个rowkey。

HBase监控哪些

存储

image.png

读请求

image.png

写请求

image.png

集群负载

image.png

CPU与系统负载

  • 每分钟平均负载
  • 最近5分钟平均负载
  • CPU利用率user(%)
  • CPU空闲率(%)
  • CPU利用率system(%)
  • CPU利用率IOWait(%)

系统内存

  • 空闲内存比例(0-1)
  • 空闲内存总量(KB)
  • 内存总量(KB)

网络流量

  • 每秒网络流入量(bytes/s)
  • 每秒网络流出量(bytes/s)

相关文章

  • HBase监控面面观

    HBase Web-UI HBase自带的Web UI上Region单位的 Read Request Count/...

  • Hbase集群监控

    Hbase集群监控 Hbase Jmx监控 监控每个regionServer的总请求数,readRequestsC...

  • HBase 对比 Kudu

    架构 HBase Master:管理与监控的RegionServer,管理HBase元数据; Zookeeper:...

  • 尚硅谷大数据技术之HBase

    第7章 HBase优化 7.1 高可用 在HBase中Hmaster负责监控RegionServer的生命周期,均...

  • HBase.go

    HBase 1.2.1、HMaster 功能: 1) 监控RegionServer 2) 处理RegionServ...

  • HBase 集群监控

    为什么需要监控? 为了保证系统的稳定性,可靠性,可运维性。 掌控集群的核心性能指标,了解集群的性能表现。 集群出现...

  • HBase 监控 | HBase Metrics 初探(一)

    前言:对于任意一个系统而言,做好监控都是非常重要的,HBase也不例外。经常,我们会从JMX中获取相关指标来做展示...

  • 十二、HBase运维

    1、HBase监控指标 1.1、指标收集:http://master_ip:port/jmx;http://reg...

  • HBase 优化

    1 高可用 在 HBase 中 HMaster 负责监控 RegionServer 的生命周期,均衡 Region...

  • 三、HBase的优化

    3.1、高可用 在HBase中Hmaster负责监控RegionServer的生命周期,均衡RegionServe...

网友评论

      本文标题:HBase监控面面观

      本文链接:https://www.haomeiwen.com/subject/cjutdktx.html