Agent 运营分析提供基于规则或 LLM 的打标工具。在开始运营评估任务前,您需要结合业务所需自定义构建标签,标签会在评估过程中为整个用户旅程或每轮对话进行打标,基于打标结果可针对 Agent 的业务使用情况、线上效果情况提供分析报告和看板,洞察更多 Agent 指标增长。
新建标签
- 登录 Agent 运营分析平台。
- 在左侧选择业务空间,并进入运营工具 > 标签列表页面。
- 在页面右上角单击新建标签,并完成以下配置。

- 标签名称:标签名称,20 字以内。若为 LLM 标签,将作为背景知识输入给标签规则组,建议填写时尽量贴近实际业务意义。
- 英文名称:标签英文名称,30 字以内。将作为该标签回流后的标签名。
- 标签描述:描述标签的用途和规则,100 字以内。若为 LLM 标签,将作为背景知识输入给标签规则组,建议填写时尽量贴近实际业务意义。
- 标签类型:异常类标签用于定位旅程中的异常,属性类标签用于标注旅程的属性。
- 评估粒度:
- 用户旅程:对整个用户旅程过程打标。
- 每轮对话:对用户的每轮对话进行打标,每轮对话的标签只会记录在该轮会话上不会汇总为用户旅程标签。
- 结果类型:标签结果的取值类型。
- 结果类型为是/否、枚举值时,支持配置规则类标签或 LLM 类标签标签规则。
- 结果类型为数值时,仅支持配置 LLM 类标签标签规则。
- 标签规则:
- 规则类标签:结果类型为是/否、枚举值支持设置的规则,符合规则的话术会被打上对应的标签。

其中:
- 支持添加多个规则,规则之间支持设置 AND、OR 关系。
- 规则支持选择事件、Trace、会话属性。不同类型所能选择的详细规则不同,例如,事件支持应用启动/退出、页面访问/关闭等各类事件的条件规则;Trace支持选择入口节点、Prompt 节点等各类节点的条件规则;会话属性支持会话轮次、总时长、总Token等条件规则。
- LLM 类标签:填写自定义提示词和评估规则,支持 AI 优化提示词。由模型自定探测 session 范围内的各类数据并按照预设结果进行打标。
- 单击确定,保存标签配置。
管理标签
在标签列表中,支持以下管理操作。

- 通过标签列表可查看各标签的状态、评估粒度、标签类型等信息。
- 单击标签名称,可查看标签配置详情。
- 单击操作列停用,停用当前标签,后续将不会生效该标签。再次单击启用,可重新启用该标签。
- 单击操作列复制,可基于当前标签配置快速新建一个标签,新建过程中支持修改原有配置项。
- 单击操作列编辑,可修改当前标签的配置。
新建标签规则组
- 登录 Agent 运营分析平台。
- 在左侧选择业务空间,并进入运营工具 > 标签规则组页面。
- 在页面右上角,单击新建标签规则组,并完成以下配置。

- 标签规则组名称:自定义名称,用于标识当前规则组。
- 标签规则组描述:自定义规则组描述,如用途等信息,将作为背景知识输出到评估 Prompt。
- 标签规则:添加一个或多个标签至当前规则组内。若没有创建标签,请先创建,具体操作请参见新建标签。
- 单击确定,保存标签规则组配置。
管理标签规则组
在标签规则组列表中,支持以下管理操作。

- 在列表中,支持查看各规则组的名称、描述、状态以及关联标签等信息。
- 单击操作列复制,可基于当前规则组配置快速新建一个规则组,新建过程中支持修改原有配置项。
- 单击操作列编辑,可修改当前规则组的配置。
- 单击操作列停用,停用当前规则组,后续将不会生效该规则组。再次单击启用,可重新启用该规则组。