如何查找Amazon SageMaker Debugger/Profiler生成的性能指标？

• SageMaker控制台：打开对应训练作业的详情页面，找到「Debugger」和「Profiler」标签页，里面会以可视化图表展示CPU/GPU使用率、内存占用、磁盘IO、网络传输等核心性能指标，还能查看自动生成的性能分析报告。
• S3存储桶获取：训练过程中生成的原始性能数据会自动存储到你指定的S3桶（或默认的SageMaker存储路径）。可以用命令行工具aws s3 cp <s3路径> <本地路径>把数据下载到本地，再通过smdebug库的API解析、生成自定义可视化结果。
• 训练脚本内实时读取：如果需要在训练过程中实时监控性能，可以在训练脚本里集成Debugger的Profiler配置，通过smdebug.profiler模块的类来实时获取指标数据，方便针对性调整训练逻辑或资源配置。
• CloudWatch指标同步：部分关键性能指标会同步到Amazon CloudWatch中，你可以在CloudWatch的指标界面，搜索SageMaker相关的命名空间，定位到对应训练作业的性能指标集合。

内容的提问来源于stack exchange，提问作者juvchan