Vidu-参考生视频模型支持传入 参考图片 和 文本提示词 ,将图片中的主体角色融合到提示词描述的场景中,生成流畅的视频内容。
服务开通
请前往阿里云百炼控制台,搜索 Vidu,找到 Vidu 模型卡片,单击立即开通;在弹窗内确认开通及授权。
适用范围
为确保调用成功,请务必保证模型、Endpoint URL 和 API Key 均属于同一地域。跨地域调用将会失败。
- 选择模型:确认模型所属的地域。
- 选择 URL:选择对应的地域 Endpoint URL,支持HTTP URL。
- 配置 API Key:选择地域并获取与配置 API Key,再配置API Key到环境变量。
HTTP 调用
由于参考生视频任务耗时较长(通常为 1-5 分钟),API 采用异步调用。整个流程包含 "创建任务 -> 轮询获取" 两个核心步骤,具体如下:
步骤 1:创建任务获取任务 ID
北京地域:POST https://{WorkspaceId}.cn-beijing.maas.aliyuncs.com/api/v1/services/aigc/video-generation/video-synthesis
调用时请将{WorkspaceId}替换为真实的业务空间ID。
- 创建成功后,使用接口返回的
task_id查询结果,task_id 有效期为 24 小时。请勿重复创建任务,轮询获取即可。 - 新手指引请参见Postman。
请求参数请求头(Headers)Content-Typestring(必选)请求内容类型。此参数必须设置为application/json。Authorizationstring(必选)请求身份认证。接口使用阿里云百炼API Key进行身份认证。示例值:Bearer sk-xxxx。X-DashScope-Asyncstring(必选)异步处理配置参数。HTTP请求只支持异步,必须设置为enable。请求体(Request Body)modelstring (必选)模型名称。可选值为:
模型选型
object (必选)输入的基本信息,包括参考图片和提示词。
属性 prompt string (必选)文本提示词。用来描述生成视频中期望包含的元素和视觉特点。支持中英文,不超过 5000 个字符,超过部分会自动截断。示例值:男人坐在靠窗的椅子上,手持吉他,在咖啡厅旁演奏一首舒缓的美国乡村民谣。提示词编写请参见Vidu视频生成Prompt指南。media array (必选)媒体素材列表,用于指定视频生成所需的参考图像。数组的每个元素为一个媒体对象,包含 type和 url 字段。
元素属性 type string (必选)媒体素材类型。可选值与模型有关:
仅传入参考图像 支持模型:vidu/viduq3-ad_reference2video、vidu/viduq3-drama_reference2video、vidu/viduq3-mix_reference2video、vidu/viduq3_reference2video、vidu/viduq3-turbo_reference2video、vidu/viduq2_reference2video固定为:
传入参考图像和视频 支持模型:vidu/viduq2-pro_reference2video可选值为:
string (必选)媒体素材URL。素材包括图像、视频。
传入图像(type=image) 参考图像URL,必须为公网可访问的 URL。
传入视频(type=video) 参考视频URL,必须为公网可访问的 URL。
object (必选)视频生成参数。如设置视频分辨率、时长等。
属性 resolution string (可选)生成视频的分辨率。可选值与模型有关:
string (可选)生成视频的分辨率,格式为宽*高的像素值。默认值根据resolution而定:
integer (必选)生成视频的时长,单位为秒。
boolean (可选)支持模型:vidu/viduq3-ad_reference2video、vidu/viduq3-mix_reference2video、vidu/viduq3_reference2video、vidu/viduq3-turbo_reference2video。是否生成有声视频。开启后模型将根据视频内容自动生成匹配的背景音乐或音效。
vidu/viduq3-drama_reference2video 不支持该参数,默认输出有声视频。 boolean (可选)是否添加水印标识,水印位于视频右下角,文案固定为“内容由AI生成”。
integer(可选)随机数种子,取值范围为[0, 2147483647]。未指定时,系统自动生成随机种子。若需提升生成结果的可复现性,建议固定seed值。请注意,由于模型生成具有概率性,即使使用相同 seed,也不能保证每次生成结果完全一致。示例值:12345。 |
|
响应参数outputobject任务输出信息。
属性 task_id string任务ID。查询有效期24小时。task_status string任务状态。
枚举值
string请求唯一标识。可用于请求明细溯源和问题排查。codestring请求失败的错误码。请求成功时不会返回此参数,详情请参见错误码。messagestring请求失败的详细信息。请求成功时不会返回此参数,详情请参见错误码。 |
请保存 task_id,用于查询任务状态与结果。 |
步骤 2:根据任务 ID 查询结果
北京地域:GET https://{WorkspaceId}.cn-beijing.maas.aliyuncs.com/api/v1/tasks/{task_id}
请求参数请求头(Headers)Authorizationstring(必选)请求身份认证。接口使用阿里云百炼API Key进行身份认证。示例值:Bearer sk-xxxx。URL 路径参数(Path parameters)task_idstring(必选)任务ID。 |
将 {task_id}完整替换为上一步接口返回的task_id的值。task_id查询有效期为24小时,并请将{WorkspaceId}替换为真实的业务空间ID。 |
响应参数outputobject任务输出信息。
属性 task_id string任务ID。查询有效期24小时。task_status string任务状态。
枚举值
string任务提交时间。格式为 YYYY-MM-DD HH:mm:ss.SSS。scheduled_time string任务执行时间。格式为 YYYY-MM-DD HH:mm:ss.SSS。end_time string任务完成时间。格式为 YYYY-MM-DD HH:mm:ss.SSS。video_urlstring视频 URL。仅在 task_status 为 SUCCEEDED 时返回。视频格式为 MP4(H.264 编码)。视频链接有效期24 小时,请及时下载。orig_prompt string原始输入的prompt,对应请求参数prompt。codestring请求失败的错误码。请求成功时不会返回此参数,详情请参见错误码。messagestring请求失败的详细信息。请求成功时不会返回此参数,详情请参见错误码。object输出信息统计。只对成功的结果计数。
属性 duration integer生成视频的总视频时长,用于计费。size string生成视频的分辨率。fps integer生成视频的帧率。固定为 24。SR string生成视频的分辨率档位。audio boolean生成视频是否为有声视频。video_count integer生成视频的数量。固定为 1。reference_type string参考素材类型。string请求唯一标识。可用于请求明细溯源和问题排查。 |
视频URL仅保留24小时,超时后会被自动清除,请及时保存生成的视频。 |
错误码
如果模型调用失败并返回报错信息,请参见错误码进行解决。
常见问题
Q:size 与 resolution 必须同时传入吗?
A: 不必。二者均为可选参数,但推荐同时传入。同时传入可精准控制生成视频的宽高比,具体参见size取值。
若不同时传入,系统将按以下两种场景处理:
-
仅传 size:size参数会被忽略,系统强制按默认的
resolution=720P及其对应的size默认值(1280*720)处理。例如:接口返回为size="1280*720", SR=720。
-
仅传 resolution:按指定分辨率档位及该档位对应的 16:9 比例输出。
例如:当resolution=540P时,接口返回 size="960528", SR=540;当resolution=1080P时,接口返回 size="19201080", SR=1080。