爱诗-参考生视频模型支持传入多张参考图片或视频,通过 文本提示词 描述场景,将素材中的主体角色融合生成一段流畅的视频。
服务开通
- 前往阿里云百炼控制台,搜索 PixVerse,找到 PixVerse 模型卡片,单击立即开通;
- 在弹窗内确认开通及授权。
适用范围
为确保调用成功,请务必保证模型、Endpoint URL 和 API Key 均属于同一地域。跨地域调用将会失败。
- 选择模型:确认模型所属的地域。
- 选择 URL:选择对应的地域 Endpoint URL,支持HTTP URL或 DashScope SDK URL。
- 配置 API Key:选择地域并获取与配置 API Key,再配置API Key到环境变量。
HTTP调用
由于参考生视频任务耗时较长(通常为1-5分钟),API采用异步调用。整个流程包含 "创建任务 -> 轮询获取" 两个核心步骤,具体如下:
步骤1:创建任务获取任务ID
北京地域:POST https://{WorkspaceId}.cn-beijing.maas.aliyuncs.com/api/v1/services/aigc/video-generation/video-synthesis
调用时请将{WorkspaceId}替换为真实的业务空间ID。
- 创建成功后,使用接口返回的
task_id查询结果,task_id 有效期为 24 小时。请勿重复创建任务,轮询获取即可。 - 新手指引请参见Postman。
请求参数请求头(Headers)Content-Typestring(必选)请求内容类型。此参数必须设置为application/json。Authorizationstring(必选)请求身份认证。接口使用阿里云百炼API Key进行身份认证。示例值:Bearer sk-xxxx。X-DashScope-Asyncstring(必选)异步处理配置参数。HTTP请求只支持异步,必须设置为enable。请求体(Request Body)modelstring (必选)模型名称。模型输出规格请参见模型列表。可选值:
模型选型
object (必选)输入的基本信息,包括参考图片和提示词。
属性 prompt string (必选)文本提示词。用来描述生成视频中期望包含的元素和视觉特点。支持中英文,每个汉字/字母占一个字符,字符编码为UTF-8,超过部分会自动截断。
@ref_name在prompt中直接引用该图片。
array (必选)媒体素材列表,用于指定视频生成所需的参考图像和视频。数组的每个元素为一个媒体对象,包含 type和 url字段。
元素属性 type string (必选)媒体素材类型。可选值:
string (必选)媒体素材URL。素材包括图像、视频(视频仅 omni 模型支持)。
传入图像(type=image_url) 参考图像URL,必须为公网可访问的 URL。
传入视频(type=video_url,仅 omni 模型) 参考视频URL,必须为公网可访问的 URL。
string (可选)参考图片或视频中主体的名称标识,用于在prompt中通过@ref_name引用。长度不超过30个字符。object (必选)视频生成参数。如设置视频分辨率、时长、是否生成音频等。
属性 resolution string (omni 模型必选)生成视频的分辨率档位。仅 pixverse/pixverse-v6-r2v-omni 使用此参数。可选值:
string (omni 模型必选)生成视频的宽高比。仅 pixverse/pixverse-v6-r2v-omni 使用此参数。可选值:
string (c1/v6/v5.6 模型必选)生成视频的分辨率,格式为宽*高的像素值。不支持 pixverse/pixverse-v6-r2v-omni 模型。不同分辨率档位对应的可选值见下方表格。
pixverse/pixverse-c1-r2v模型
pixverse/pixverse-v6-r2v模型
pixverse/pixverse-v5.6-r2v模型(建议升级至v6)
integer (必选)生成视频的时长,单位为秒。可选值:
boolean (可选)是否生成有声视频。开启后模型将根据视频内容自动生成匹配的背景音乐或音效。
boolean (可选)是否添加水印标识,水印位于视频右下角,文案固定为“AI生成”。
integer(可选)随机数种子,取值范围为[0, 2147483647]。未指定时,系统自动生成随机种子。若需提升生成结果的可复现性,建议固定seed值。请注意,由于模型生成具有概率性,即使使用相同 seed,也不能保证每次生成结果完全一致。 |
通过 media 传入参考视频和参考图片,使用 resolution 和 aspect_ratio 控制输出分辨率和画面比例。 |
响应参数outputobject任务输出信息。
属性 task_id string任务ID。查询有效期24小时。task_status string任务状态。
枚举值
string请求唯一标识。可用于请求明细溯源和问题排查。codestring请求失败的错误码。请求成功时不会返回此参数,详情请参见错误码。messagestring请求失败的详细信息。请求成功时不会返回此参数,详情请参见错误码。 |
请保存 task_id,用于查询任务状态与结果。 |
步骤2:根据任务ID查询结果
北京地域:GET https://{WorkspaceId}.cn-beijing.maas.aliyuncs.com/api/v1/tasks/{task_id}
请求参数请求头(Headers)Authorizationstring(必选)请求身份认证。接口使用阿里云百炼API Key进行身份认证。示例值:Bearer sk-xxxx。URL路径参数(Path parameters)task_idstring(必选)任务ID。 |
将 {task_id}完整替换为上一步接口返回的task_id的值。task_id查询有效期为24小时,并请将{WorkspaceId}替换为真实的业务空间ID。 |
响应参数outputobject任务输出信息。
属性 task_id string任务ID。查询有效期24小时。task_status string任务状态。
枚举值
string任务提交时间。格式为 YYYY-MM-DD HH:mm:ss.SSS。scheduled_time string任务执行时间。格式为 YYYY-MM-DD HH:mm:ss.SSS。end_time string任务完成时间。格式为 YYYY-MM-DD HH:mm:ss.SSS。video_urlstring视频URL。仅在 task_status 为 SUCCEEDED 时返回。视频格式为MP4(H.264 编码)。视频链接暂无过期时间,但不建议将其作为长期存储依赖,请及时下载。orig_prompt string原始输入的prompt,对应请求参数prompt。codestring请求失败的错误码。请求成功时不会返回此参数,详情请参见错误码。messagestring请求失败的详细信息。请求成功时不会返回此参数,详情请参见错误码。object输出信息统计。只对成功的结果计数。
属性 duration integer生成视频的总视频时长,用于计费。size string生成视频的分辨率。fps integer生成视频的帧率。SR string生成视频的分辨率档位。audio boolean生成视频是否为有声视频。video_count integer生成视频的数量。固定为1。string请求唯一标识。可用于请求明细溯源和问题排查。 |
|
错误码
如果模型调用失败并返回报错信息,请参见错误码进行解决。
常见问题
Q: prompt 效果不理想时,如何优化?
A: 可尝试使用 @ref_name 作为替代方案。
- 默认做法:直接使用 prompt,模型会自动全局解析参考图内容,适用于大多数常规场景。
- 替代方案:若发现生成效果偏离预期,可通过
@ref_name将参考图指定在提示词中,增强生成效果。
Q:如何使用ref_name?
A:ref_name 用于建立参考图与提示词的绑定关系。在 media数组中为图片设置 ref_name 后,prompt 中可通过 @ref_name语法引用对应的参考图主体。
- 例如:media 中设置
"ref_name": "小猫",则 prompt 中使用@小猫来引用该主体。注意:@小猫后必须保留空格。 - 示例:@小猫 和@小狗 在草地上玩耍。