## 接口简介根据用户上传的单张**图片**+**音频**，生成该图片对应的视频效果。OmniHuman数字人模型支持输入任意画幅包含人物的图片，结合音频，生成生动高质量的视频结果。人物的情绪、动态与音频具有强关联性。同时模型对动漫、卡通等形象等有一定的泛化性，可广泛应用于内容表达、唱歌和演绎等场景。 **强烈建议**：请先执行**调用步骤1：主体识别**，确保输入图中存在人、类人、拟人等主体。 ## 限制条件 |名称 |内容 | |---|---| |图片与音频要求 |1. 图片格式：JPG(JPEG), PNG, JFIF 等常见格式, 建议使用JPG格式|\ | |2. 图片要求：小于5 MB，小于4096\*4096。|\ | |3. 输入图：建议做前置检测，输入图中为单人、人脸占比大、正面效果较好，其他类型图片效果不佳|\ | |4. 音频时长建议小于15秒以保障生成效果，音频过长可能有效果裂化问题。 | ## 请求说明 |名称 |内容 | |---|---| |接口地址 |[https://visual.volcengineapi.com](https://visual.volcengineapi.com/) | |请求方式 |POST | |Content\-Type |application/json | ## 提交任务 ### **提交任务请求参数** #### **Query参数** :::tip 拼接到url后的参数，示例：[https://visual.volcengineapi.com?Action=CVSubmitTask&Version=2022-08-31](https://visual.volcengineapi.com?Action=CVSubmitTask&Version=2022-08-31) ::: |参数 |可选/必选 |类型 |说明 | |---|---|---|---| |Action |必选 |String |接口名，取值：CVSubmitTask | |Version |必选 |String |版本号，取值：2022\-08\-31 | #### **Header参数** :::warning 本服务固定值：**Region为cn\-north\-1，Service为cv** ::: 主要用于鉴权，详见 [公共参数](https://www.volcengine.com/docs/6369/67268) \- 签名参数 \- 在Header中的场景部分 #### **Body参数** :::warning 业务请求参数，放到request.body中，MIME\-Type为**application/json** ::: |名称 |类型 |必选 |描述 |备注 | |---|---|---|---|---| |req_key |string |是 |服务标识| |\ | | | |取固定值: **realman_avatar_picture_omni_v2** | | |image_url |string |是 |人像图片URL链接 | | |audio_url |string |是 |音频URL链接 | | ### 提交任务返回参数 #### **通用返回参数** 请参考[通用返回字段及错误码](https://www.volcengine.com/docs/6444/69728) #### **业务返回参数** :::tip 重点关注data中以下字段，其他字段为公共返回(可忽略或不做解析) ::: |字段 |类型 |说明 | |---|---|---| |task_id |string |任务ID，用于查询结果 | ### 提交任务请求&返回完整示例 **请求示例：** ```JSON { "req_key": "realman_avatar_picture_omni_v2", "image_url": "https://xxxxx.jpg", "audio_url": "https://xxxxx.mp3" } ``` **返回示例：** ```JSON { "code": 10000, //状态码，判断状态，code!=10000的情况下，不会返回task_id "data": { "task_id": "7392616336519610409" //任务ID，查询接口使用 }, "message": "Success", "request_id": "20240720103939AF0029465CF6A74E51EC", //排查错误的关键信息 "time_elapsed": "104.852309ms" //链路耗时 } ``` ## 查询任务 ### **查询任务请求参数** #### **Query参数** :::tip 拼接到url后的参数，示例：[https://visual.volcengineapi.com](https://visual.volcengineapi.com/)[?Action=CVGetResult&Version=2022-08-31](https://visual.volcengineapi.com?Action=CVGetResult&Version=2022-08-31) ::: |参数 |可选/必选 |类型 |说明 | |---|---|---|---| |Action |必选 |String |接口名，固定值：CVGetResult | |Version |必选 |String |版本号，固定值：**2022\-08\-31** | #### **Header参数** :::warning 本服务固定值：**Region为cn\-north\-1，Service为cv** ::: 主要用于鉴权，详见 [公共参数](https://www.volcengine.com/docs/6369/67268) \- 签名参数 \- 在Header中的场景部分 #### **Body参数** :::warning 业务请求参数，放到request.body中，MIME\-Type为**application/json** ::: |参数 |可选/必选 |类型 |说明 |示例 | |---|---|---|---|---| |req_key |必选 |String |服务标识| |\ | | | |取固定值: **realman_avatar_picture_omni_v2** | | |task_id |必选 |String |任务ID，此字段的取值为**提交任务接口**的返回 | | |req_json |可选 |JSON String |json序列化后的字符串,目前支持隐性水印配置，可在返回结果中添加 |示例："{\"aigc_meta\": {\"content_producer\": \"xxxxxx\", \"producer_id\": \"xxxxxx\", \"content_propagator\": \"xxxxxx\", \"propagate_id\": \"xxxxxx\"}}" | ##### **ReqJson(序列化后的结果再赋值给req_json)** 配置信息 |**参数** |**类型** |**可选/必选** |**说明** | | |---|---|---|---|---| |aigc_meta |AIGCMeta |可选 |隐式标识 |隐式标识验证方式：|\ | | | | ||\ | | | | |https://www.gcmark.com/web/index.html#/mark/check/video|\ | | | | | 验证，先注册帐号上传打标后的视频点击开始检测输出检测结果如下图即代表成功|\ | | | | ||\ | | | | |

|\ | | | | |

|\ | | | | | | ##### AIGCMeta 隐式标识，依据《人工智能生成合成内容标识办法》&《网络安全技术人工智能生成合成内容标识方法》 |名称 |类型 |**可选/必选** |描述 | |---|---|---|---| |content_producer |string |可选 |内容生成服务ID（长度 <= 256字符） | |producer_id |string |必选 |内容生成服务商给此图片数据的唯一ID（长度 <= 256字符） | |content_propagator |string |必选 |内容传播服务商ID（长度 <= 256字符） | |propagate_id |string |可选 |传播服务商给此图片数据的唯一ID（长度 <= 256字符） | ### 查询任务返回参数 #### **通用返回参数** 请参考[通用返回字段及错误码](https://www.volcengine.com/docs/6444/69728) #### **业务返回参数** :::tip 重点关注data中以下字段，其他字段为公共返回(可忽略或不做解析) ::: |参数名 |类型 |参数说明 | |---|---|---| |video_url |string |视频链接（有效期为 1 小时） | |aigc_meta_tagged |bool |隐式标识是否打标成功 | |status |string |任务执行状态|\ | | ||\ | | |* in_queue：任务已提交|\ | | |* generating：任务已被消费，处理中|\ | | |* done：处理完成，成功或者失败，可根据外层code&message进行判断|\ | | |* not_found：任务未找到，可能原因是无此任务或任务已过期(12小时)|\ | | |* expired：任务已过期，请尝试重新提交任务请求 | ### 查询任务请求&返回完整示例 **请求示例：** ```JSON { "req_key": "realman_avatar_picture_omni_v2", "task_id": "<任务提交接口返回task_id>", "req_json": "{\"aigc_meta\": {\"content_producer\": \"001191440300192203821610000\", \"producer_id\": \"producer_id_test123\", \"content_propagator\": \"001191440300192203821610000\", \"propagate_id\": \"propagate_id_test123\"}}" } ``` **返回示例：** ```JSON { "code": 10000, //状态码，优先判断 code=10000, 然后再判断data.status，否则解析有可能会panic "data": { "aigc_meta_tagged": true, "binary_data_base64": [], "image_urls": null, "resp_data": "{\"progress\": 100, \"received_at\": 1748401096, \"processed_at\": 1748401096, \"finished_at\": 1748401249, \"binary_data_url_list\": [], \"binary_data_info_list\": [], \"code\": 0, \"msg\": \"success\", \"video\": {\"Vid\": \"v020adg10005d0r7oo7og65lbbus099g\", \"VideoMeta\": {\"Uri\": \"tos-cn-v-242bcc/oYP1EWMfrVBAKQABYZQQfjCoeAAAMqAcbQ8MlD\", \"Height\": 1280, \"Width\": 960, \"OriginHeight\": 1280, \"OriginWidth\": 960, \"Duration\": 5.52, \"Bitrate\": 2248262, \"Md5\": \"7cbbae108219ce58c06f57a05a59a06e\", \"Format\": \"MP4\", \"Size\": 1551301, \"FileType\": \"video\", \"Codec\": \"h264\"}, \"GetPosterMode\": \"sync\"}, \"alpha\": null, \"url\": null, \"algorithm_status_code\": 0, \"preview_url\": [], \"vid\": [\"v020adg10005d0r7oo7og65lbbus099g\"], \"video_meta\": [{\"Uri\": \"tos-cn-v-242bcc/oYP1EWMfrVBAKQABYZQQfjCoeAAAMqAcbQ8MlD\", \"Height\": 1280, \"Width\": 960, \"OriginHeight\": 1280, \"OriginWidth\": 960, \"Duration\": 5.52, \"Bitrate\": 2248262, \"Md5\": \"7cbbae108219ce58c06f57a05a59a06e\", \"Format\": \"MP4\", \"Size\": 1551301, \"FileType\": \"video\", \"Codec\": \"h264\"}]}", "status": "done", //任务状态 "video_url": "https://xxx.mp4" }, "message": "Success", "status": 10000, //无需关注，请忽略 "request_id": "2025061718460554C9B78D23B0BAB45B2A", //排查错误的关键信息 "time_elapsed": "508.312154ms" //链路耗时 } ``` **返回报错示例：** ```JSON { "code": 50413, //状态码，优先判断 code=10000, 然后再判断data.status，否则解析有可能会panic "data": null, //code!=10000的情况下，该字段返回为null "message": "Post Text Risk Not Pass", //错误信息 "request_id": "202511281418218670D408837A9B0EB58F", //排查错误的关键信息 "status": 50413, //无需关注，请忽略 "time_elapsed": "36.799829ms" //链路耗时 } ``` ## 错误码 ### **通用错误码** 请参考[通用返回字段及错误码](https://www.volcengine.com/docs/6444/69728) ### **业务错误码** |HttpCode |错误码 |错误消息 |描述 |是否需要重试 | |---|---|---|---|---| |200 |10000 |无 |请求成功 |不需要 | |400 |50411 |Pre Img Risk Not Pass |输入图片前审核未通过 |不需要 | |400 |50511 |Post Img Risk Not Pass |输出图片后审核未通过 |可重试 | |400 |50412 |Text Risk Not Pass |输入文本前审核未通过 |不需要 | |400 |50512 |Post Text Risk Not Pass |输出文本后审核未通过 |不需要 | |400 |50413 |Post Text Risk Not Pass |输入文本含敏感词、版权词等审核不通过 |不需要 | |429 |50429 |Request Has Reached API Limit, Please Try Later |QPS超限 |可重试 | |429 |50430 |Request Has Reached API Concurrent Limit, Please Try Later |并发超限 |可重试 | |500 |50500 |Internal Error |内部错误 |可重试 | |500 |50501 |Internal RPC Error |内部算法错误 |可重试 | ## 接入说明 ### SDK使用说明请参考[SDK使用说明](https://www.volcengine.com/docs/6444/1340578) ### HTTP方式接入说明请参考[HTTP请求示例](https://www.volcengine.com/docs/6444/1390583)

图像生成大模型