实验订阅 #

除了本项目内记录的实验数据，还可以通过订阅形式将其他项目内的实验加至该项目进行对比。多用于多方向探索场景下进行的横向对比和实验数据复用场景。

基线对比 #

选中任意实验标记为基线后，可以查看基于该条实验，各项指标的变化趋势，更快识别表现最优的训练。配合“隐藏数据相同列”可以一键实现批量隐藏，更易突显差异化数据。

数据筛选和视图调整 #

丰富的操作项，支持精细化调整

多条件过滤，快速查找有效信息

表头筛选和排序能力支持批量调整

视图分享 #

实验项目进行时尤其是共创协作场景下，可能存在不同的对比和分析视角，因此平台提供了视图保存能力，支持用户将项目内的数据和内容进行配置后保存为一个视图。视图也可被分享给同组的其他协作成员，以便他/她获得一个和你完全一样的观察视角，提高协作交流效率。

图表控制台 - 数据平滑 #

数据波动较大时，可以开启平滑能力，更加清楚的看到数据的变化趋势。支持常用的EMA/SMA平滑效果。如图，展示每50步进行滑到平均后曲线的变化情况（浅色部分为原始曲线，作为参照。也可通过图表偏好配置将原图关闭，仅查看平滑后的效果。）

图表控制台 - 数据聚合 #

聚合能力可将多个实验的数据进行合并，如图3个实验被聚合为一个实验组，可以看到组内各实验的loss以及该组实验的平均loss。

图表控制台 - X/Y轴调节 #

可对X轴和Y轴分别进行范围调整，包括对数变换，排除异常值等。

也可对某一图表进行单独调整

图表控制台 - 轴切换和轴计算 #

• X轴切换为绝对时间或相对时间，查看指标在时间维度的变化
• X轴切换为另一指标进行2个指标的相关性查看

添加多个指标至图表进行联合查看

对X或Y 进行二次计算

图表控制台 - 图表偏好配置 #

如图根据偏好灵活调节图表面板的空间排布和信息丰富程度

实验洞察 #

这个新模块将帮助大家更有效地理解和比较不同实验的结果。

入口

选择一个项目进入后，默认页新增了实验洞察tab，您可以在这里添加希望洞察的实验。

操作指南

分为两个模块：配置洞察和添加图表。

第一步 - 配置洞察

• 新增一个洞察

点击新增洞察，填写名称（必填）以及描述创建您的实验洞察；

• 选择实验

您可以通过带搜索的下拉菜单进行实验勾选，只能选择本项目内的实验。
如果您希望同步当前实验概览中所有已选实验，可以勾选“一键同步”。
注意，勾选的实验需要不超过100条。

• 分组

第二步 - 添加与配置图表

• 添加洞察图表入口

• 图表配置

您可以对新添加以及已有的图表进行配置：
X轴和Y轴

• 指标切换：您可以切换X轴和Y轴的不同指标。
• 范围调整：您可以根据需要调整X轴和Y轴的范围。
• 对数变换功能：如果您的数据跨度很大，您可以使用对数变换功能来更好地显示数据。
• 重置功能：如果您对轴进行了任何更改，可以使用重置功能将其恢复到默认设置。
• 计算：您可以为每个轴配置计算公式。
• 可设置计算生效的实验组
  • 如果您选择“实验组”，您可以为每个实验组分别配置计算公式。
  • 如果您选择“全部”，则配置的计算公式将生效于包含该指标的所有分组的曲线。此外，您还可以选择排除某些实验。

Y轴特有功能

• 平滑功能：如果您的数据包含噪声，您可以使用平滑功能来使曲线更加平滑。
• 去除异常功能：如果您的数据中包含异常值，您可以使用此功能将其去除。

数据合并
您可以选择是否进行组内的数据合并。注意，合并操作只针对组内的数据，而非全部实验：

• 聚合：您可以选择聚合方式（Mean、Median、Max、Min）并选择展示范围（+- Std Dev、Min-Max、None）。
• 拼接：您可以选择按最新数据进行覆盖或按最初数据进行覆盖。
• 不合并：数据将不进行聚合或拼接。

配置完成后的洞察图表会展示在洞察页面。