You need to enable JavaScript to run this app.
导航
CreateEvaluationJob - 创建评测任务
最近更新时间:2024.05.15 22:58:52首次发布时间:2024.05.15 22:58:52

创建评测任务

请求参数

下表仅列出该接口特有的请求参数和部分公共参数。更多信息请见公共参数

参数
类型
是否必填
示例值
描述
Action
String

CreateEvaluationJob

要执行的操作,取值:CreateEvaluationJob。

Version
String

2024-01-01

API的版本,取值:2024-01-01。

Name
String

-

模型评测任务名称

Description
String

-

模型评测任务描述

ModelReference
ModelReference

-

模型评测任务的评测对象

EvaluationDatasets
Array of EvaluationResultDatasetInfo

-

模型评测任务的评测集

DryRun
Boolean

-

是否仅对此请求进行预检。取值:

  • true:发送检查请求。

  • false(默认):发送正常请求

ProjectName
String

-

项目名称

Tags
Array of Tag

-

模型评测任务绑定的标签

返回参数

下表仅列出本接口特有的返回参数。更多信息请参见返回结构

参数
类型
示例值
描述
Id
String

-

模型评测任务的ID

请求示例

{
    "Name": "my-evaluation-job",
    "Description": "This is my evaluation job",
    "EvaluationDatasets": [
        {
            "DatasetType": "UserDataset",
            "Method": "Match",
            "EvaluationAbility": "KnowledgeCapability",
            "TosLocation": {
                "BucketName": "my-bucket-name",
                "ObjectKey": "path/to/my/dataset/my-dataset.jsonl"
            }
        },
        {
            "DatasetType": "AdminDataset",
            "Method": "BuiltIn",
            "AdminEvaluationDatasetId": "aed-20240227112053-bt425"
        }
    ],
    "EvaluationJobSettings": {
        "ResultTosLocation": {
            "BucketName": "my-bucket-name",
            "ObjectKey": "path/to/my/results/"
        }
    },
    "ModelReference": {
        "FoundationModel": {
            "Name": "skylark-lite-8k",
            "ModelVersion": "1.0"
        }
    },
    "ProjectName": "default"
}

返回示例

{
    "ResponseMetadata": {
        "RequestId": "202404111449574CC61570F45B511EF0FC",
        "Action": "CreateEvaluationJob",
        "Version": "2024-01-01",
        "Service": "ark",
        "Region": "cn-beijing"
    },
    "Result": {
        "Id": "ej-20240411064957-hxj6z"
    }
}

错误码

您可访问公共错误码,获取更多错误码信息。