You need to enable JavaScript to run this app.
导航

服务概述

最近更新时间2022.09.16 14:36:31

首次发布时间2022.04.29 10:10:09

查看服务概述信息

  1. 在集群详情页,点击 服务列表 查看已开通的服务,并选择需要查看概述信息的服务,单击 服务名称 进入服务详情。

  2. 服务概述 页面会展示该服务的运行情况的概述信息,概述信息分为文字指标信息和图表指标信息两种。
    (服务概述功能现支持以下服务:HDFS、Hive、YARN、HBase、Kafka、Presto、Trino、Ranger)

  3. 文字指标显示服务组件此刻的状态。

  4. 图表指标显示服务组件在过去一段时间内的状态,点击可切换查看信息的时间段(可选1小时,3小时,6小时,12小时,1天,3天)

各服务指标及说明

HDFS

指标类型说明
容量信息展示存储空间的整体使用量
健康度展示集群的块损坏,副本丢失等情况,用于维护
节点信息展示集群的节点信息
NameNode RPC 端口上的调用队列长度显示 NameNode 的 RPC 端口调用队列长度
NameNode JVM GC 次数统计分别统计 NameNode 节点 JVM 的 youngGC 和 fullGC 次数
NameNode JVM GC 时间统计分别统计 NameNode 节点 JVM 的 youngGC 和 fullGC 时间
NameNode JVM 内存分区分别统计 NameNode 节点 JVM 各分区的使用情况。
NameNode RPC 端口上的处理时间显示 NameNode 的 RPC 端口上的处理时间

Hive

指标类型说明
节点信息展示集群中各节点的部署和运行情况。
查询信息近期用户提交的查询的运行情况,包括用户已经提交的查询总数,运行中的查询,已经完成的查询和查询成功的查询。
Hive Server2 连接数指客户端已连接到 HiveServer2 的 session 连接总数。

YARN

指标类型说明
状态信息展示集群中各节点的部署和运行情况。
集群 CPU 状态展示集群 CPU 的使用状态,包括总量,已用量和剩余量。
集群内存状态展示集群内存的状态,包括总量,已用量和剩余量。
任务状态统计 YARN 中的任务的状态,包括提交的任务数,运行中的任务数,处于 Pending 状态的任务,运行完任务数,被杀死的任务数和执行失败的任务数。

HBase

指标类型说明
节点信息展示集群中各节点的部署和运行情况。
HRegion server CPU 使用率展示 HRegion server CPU 的使用百分比。
HRegion server 内存使用率展示 HRegion server 内存的使用百分比。
HRegion IO 趋势图展示 HRegion IO 的趋势图,包括 HRegion 读取数据量,HRegion 写取数据量,HRegion 总数据量,HRegion 删除数据量。

Kafka

指标类型说明
状态信息展示 Kafka 的 Broker,Topics,Partitions 总数和 Bootstrap Server,ZooKeeper 所在的节点名称。

Presto、Trino

指标类型说明
状态信息展示 coordinators 和 workers 的情况,包括节点名称和数量。
CPU 使用情况统计 CPU 的使用数量
Memory 使用情况统计 Memory 使用情况
Queries统计已完成的,排队中的,已失败的查询数量

Ranger

Ranger 概述为用户展示和操作 Hadoop 集群 Ranger Plugin 的开启和关闭情况提供入口。

  • Ranger 在 EMR V1.2.0之后的版本,提供 6种 Plugin 组件如下:
    • 仅展示集群已经安装的组件,例如 Presto 作为可选组件没有安装,则清单中不展示该组件。
插件名称插件描述说明插件开启开关
HDFS控制 HDFS 文件路径的读、写、执行等权限开启/关闭状态
Hive控制 Hive 库、表、列和 UDF 的读、写、操作权限开启/关闭状态
YARN控制 YARN 队列的提交和管理权限开启/关闭状态
Presto控制 Presto 库、表、列的操作权限开启/关闭状态
Trino控制 Trino 库、表、列的操作权限开启/关闭状态
SparkSQL控制 SparkSQL 对 Hive 库、表、列的操作权限开启/关闭状态