You need to enable JavaScript to run this app.
导航

人工评测作业

最近更新时间2023.09.27 12:06:46

首次发布时间2023.09.27 12:06:46

  1. 上线任务

任务创建者在 我创建的 tab下,找到待上线任务,点击 是否上线 按钮,将任务上线。

  1. 标注员身份任务作业

人工评测任务页面,切换至 我评测的 tab, 可以查看以标注员身份需要作业的评测任务。

点击待评测的任务名称,点击右上角 开始答题 按钮,进入到评测页面。

针对多模型或者单模型模式的模型效果进行评测标注。专业版模式下,可以评测GSB分数,diff问题类型,各个模型的有用性,真实性,安全性,自身分体类型等内容,点击右上角 提交 按钮,提交本题并且领取下一道题。
专业版多模型评测页面

专业版单模型评测页面

  1. 审核员身份任务作业

人工评测任务页面,切换至 我审核的 tab, 可以查看以审核员身份需要作业的评测任务。审核标注员标注的每一道题。

点击待评测的任务名称,点击右上角 开始答题 按钮,进入到评测页面。

评测页面与标注员的评测页面相同,可以对在 审核备注 处填写审核意见。可以直接修改标注员标注的评测结果,也可以点击右上角的 驳回 按钮,将此题驳回给标注员进行重新标注。可以点击右上角的 通过 按钮,通过此题,同时自动领取下一道题。

  1. 质检员身份任务作业

人工评测任务页面,切换至 我质检的 tab, 可以查看以质检员身份需要作业的评测任务。

点击待评测的任务名称,点击 质检抽检 tab。

点击左上角 创建抽检包 按钮。

可以选择优先抽检的模式,并且自定义抽检题目数量,点击 确定 按钮创建抽检包。

在质检抽检列表页面,点击抽检包的 开始抽检 按钮,点击某一道试题的 抽检 按钮进行质检作业。作业页面与评测标注页面相同,可以填写 质检备注 内容对质检评论进行备注

所有试题抽检完成后,点击抽检包的终止按钮,终止质检状态。

点击 批量操作 按钮,选择是否将任务推送至验收状态,或者驳回所有试题。

  1. 验收员身份作业任务

人工评测任务页面,切换至 我验收的 tab, 可以查看以验收员身份需要作业的评测任务

点击待评测的任务名称,点击 质检抽检 tab

点击左上角 创建抽检包 按钮,创建一个抽检包

可以选择优先抽检的模式,并且自定义抽检题目数量。

在质检抽检列表页面,点击抽检包的 开始抽检 按钮,进行质检作业。作业页面与评测标注页面相同。
我验收的 tab, 设置任务的合格状态或者不合格状态。