最近更新时间:2024.02.28 20:04:51
首次发布时间:2023.07.24 17:34:24
容器服务集群通过 Nydus 实现镜像懒加载,提升创建 Pod 过程的镜像拉取速度。本文为您介绍如何配置和查看 Nydus 的监控信息。
说明
【邀测·申请试用】:镜像懒加载功能目前处于 邀测 阶段,若未开启该功能则无法查看监控大盘。如需要使用镜像懒加载功能,请提交申请。
当您将容器服务集群正确接入托管 Prometheus,并安装了对应的组件后,需要配置对应的采集规则,才能正确采集指标。
说明
您需要在集群的节点池中,开启镜像懒加载功能。才能正确查看指标信息。
说明
创建集群时的其他配置,请参见 创建集群。
配置 Nydus 懒加载功能后,您可以在容器服务控制台中,查看预置的监控大盘。包括:Nydus Daemon 数量、Nydus Daemon 内存用量等。
说明
您也可以在集群中自建 Grafana,并通过 Grafana 查看指标和创建大盘。详情请参见 将托管 Prometheus 数据接入自建 Grafana。
Nydus 监控大盘的指标清单如下表所示。
大盘分类 | 大盘名称 | 指标单位 | PromQL 语句 |
---|---|---|---|
Nydus Daemon 监控 | Nydus Daemon 数量 | Count | sum(nydusd_counts{node=~"$node"})by(version) |
Nydus Daemon 内存用量 | MB | topk(10,sum(nydusd_rss_kilobytes{cluster="$clusterId",node=~"$node"})by (node)) | |
Prepare 函数执行时间 P90 | ms | topk(10,histogram_quantile(0.9,sum(rate(snapshotter_snapshot_operation_elapsed_milliseconds_bucket{cluster="$clusterId",node=~"$node",snapshot_operation="PREPARE"}[5m]))by (le,node))) | |
Cleanup 函数执行时间 P90 | ms | topk(10,histogram_quantile(0.9,sum(rate(snapshotter_snapshot_operation_elapsed_milliseconds_bucket{cluster="$clusterId",node=~"$node",snapshot_operation="CLEANUP"}[5m]))by (le,node))) | |
Mount 函数执行时间 P90 | ms | topk(10,histogram_quantile(0.9,sum(rate(snapshotter_snapshot_operation_elapsed_milliseconds_bucket{cluster="$clusterId",node=~"$node",snapshot_operation="MOUNTS"}[5m]))by (le,node))) | |
Remove 函数执行时间 P90 | ms | topk(10,histogram_quantile(0.9,sum(rate(snapshotter_snapshot_operation_elapsed_milliseconds_bucket{cluster="$clusterId",node=~"$node",snapshot_operation="REMOVE"}[5m]))by (le,node))) | |
Nydus snapshotter 资源使用 | Nydus snapshotter CPU 使用率 | % | topk(10,sum(snapshotter_cpu_usage_percentage{cluster="$clusterId",node=~"$node"})by (node)) |
Nydus snapshotter 内核态 CPU 时间 | ms | topk(10,sum(snapshotter_cpu_system_time_seconds{cluster="$clusterId",node=~"$node"})by (node)) | |
Nydus snapshotter 用户态 CPU 时间 | ms | topk(10,sum(snapshotter_cpu_user_time_seconds{cluster="$clusterId",node=~"$node"})by (node)) | |
Nydus snapshotter 内存用量 | MB | topk(10,sum(snapshotter_memory_usage_kilobytes{cluster="$clusterId",node=~"$node"})by (node)) | |
Nydus snapshotter Cache 用量 | B | topk(10,sum(snapshotter_cache_usage_kilobytes{cluster="$clusterId",node=~"$node"})by (node)) | |
Nydus 错误和事件 | Nydusd Read error 数量 | Count | topk(10,sum(nydusd_read_errors{cluster="$clusterId",node=~"$node"}) by(node)) |
Nydusd Died event 数量 | Count | topk(10,sum(nydusd_lifetime_event_counts{cluster="$clusterId",node=~"$node",nydusd_event="DIED"})by (node)) | |
Nydus read 性能 | Nydus read P90 延迟 | ms | topk(10,histogram_quantile(0.9,sum(rate(nydusd_read_latency_microseconds_bucket{cluster="$clusterId",node=~"$node"}[5m]))by(le,node))) |
Nydus read 成功数量 | Count | topk(10,sum(nydusd_read_hits{cluster="$clusterId",node=~"$node"})by(node)) | |
Nydus read 总 Size | B | topk(10, sum(nydusd_total_read_bytes{cluster="$clusterId", node=~"$node"})by (node)) | |
Nydus read hang IO 数量 | Count | topk(10,sum(nydusd_hung_io_counts{cluster="$clusterId",node=~"$node"})by (node)) |
说明
如果您需要在托管 Prometheus 中的 Explore 功能或告警中心使用上述 PromQL 语句查看具体的指标或配置告警,请修改或删除语句中关于集群、节点、容器组的变量。例如:将 cluster=~"$Cluster"
参数中的$Cluster
变量修改为具体的集群 ID ,或直接删除该参数。
您可以使用托管 Prometheus 的 Explore 功能来快速查询和展示指标数据。详情请参见 指标查询。
您可以在托管 Prometheus 的告警中心配置集群相关告警。详情请参见 创建告警规则。