查看服务概述信息
在集群详情页,点击 服务列表 查看已开通的服务,并选择需要查看概述信息的服务,单击 服务名称 进入服务详情。
在 服务概述 页面会展示该服务的运行情况的概述信息,概述信息分为文字指标信息和图表指标信息两种。
(服务概述功能现支持以下服务:HDFS、Hive、YARN、HBase、Kafka、Presto、Trino、Ranger)
文字指标显示服务组件此刻的状态。
图表指标显示服务组件在过去一段时间内的状态,点击可切换查看信息的时间段(可选1小时,3小时,6小时,12小时,1天,3天)
各服务指标及说明
HDFS
指标类型 | 说明 |
---|
容量信息 | 展示存储空间的整体使用量 |
健康度 | 展示集群的块损坏,副本丢失等情况,用于维护 |
节点信息 | 展示集群的节点信息 |
NameNode RPC 端口上的调用队列长度 | 显示 NameNode 的 RPC 端口调用队列长度 |
NameNode JVM GC 次数统计 | 分别统计 NameNode 节点 JVM 的 youngGC 和 fullGC 次数 |
NameNode JVM GC 时间统计 | 分别统计 NameNode 节点 JVM 的 youngGC 和 fullGC 时间 |
NameNode JVM 内存分区 | 分别统计 NameNode 节点 JVM 各分区的使用情况。 |
NameNode RPC 端口上的处理时间 | 显示 NameNode 的 RPC 端口上的处理时间 |
Hive
指标类型 | 说明 |
---|
节点信息 | 展示集群中各节点的部署和运行情况。 |
查询信息 | 近期用户提交的查询的运行情况,包括用户已经提交的查询总数,运行中的查询,已经完成的查询和查询成功的查询。 |
Hive Server2 连接数 | 指客户端已连接到 HiveServer2 的 session 连接总数。 |
YARN
指标类型 | 说明 |
---|
状态信息 | 展示集群中各节点的部署和运行情况。 |
集群 CPU 状态 | 展示集群 CPU 的使用状态,包括总量,已用量和剩余量。 |
集群内存状态 | 展示集群内存的状态,包括总量,已用量和剩余量。 |
任务状态 | 统计 YARN 中的任务的状态,包括提交的任务数,运行中的任务数,处于 Pending 状态的任务,运行完任务数,被杀死的任务数和执行失败的任务数。 |
HBase
指标类型 | 说明 |
---|
节点信息 | 展示集群中各节点的部署和运行情况。 |
HRegion server CPU 使用率 | 展示 HRegion server CPU 的使用百分比。 |
HRegion server 内存使用率 | 展示 HRegion server 内存的使用百分比。 |
HRegion IO 趋势图 | 展示 HRegion IO 的趋势图,包括 HRegion 读取数据量,HRegion 写取数据量,HRegion 总数据量,HRegion 删除数据量。 |
Kafka
指标类型 | 说明 |
---|
状态信息 | 展示 Kafka 的 Broker,Topics,Partitions 总数和 Bootstrap Server,ZooKeeper 所在的节点名称。 |
Presto、Trino
指标类型 | 说明 |
---|
状态信息 | 展示 coordinators 和 workers 的情况,包括节点名称和数量。 |
CPU 使用情况 | 统计 CPU 的使用数量 |
Memory 使用情况 | 统计 Memory 使用情况 |
Queries | 统计已完成的,排队中的,已失败的查询数量 |
Ranger
Ranger 概述为用户展示和操作 Hadoop 集群 Ranger Plugin 的开启和关闭情况提供入口。
- Ranger 在 EMR V1.2.0之后的版本,提供 6种 Plugin 组件如下:
- 仅展示集群已经安装的组件,例如 Presto 作为可选组件没有安装,则清单中不展示该组件。
插件名称 | 插件描述说明 | 插件开启开关 |
---|
HDFS | 控制 HDFS 文件路径的读、写、执行等权限 | 开启/关闭状态 |
Hive | 控制 Hive 库、表、列和 UDF 的读、写、操作权限 | 开启/关闭状态 |
YARN | 控制 YARN 队列的提交和管理权限 | 开启/关闭状态 |
Presto | 控制 Presto 库、表、列的操作权限 | 开启/关闭状态 |
Trino | 控制 Trino 库、表、列的操作权限 | 开启/关闭状态 |
SparkSQL | 控制 SparkSQL 对 Hive 库、表、列的操作权限 | 开启/关闭状态 |