在我的模型中,可以统一管理您在阿里云百炼调优后的模型以及从 OSS 导入的模型(限 LoRA 微调和全参微调),涵盖首次 OSS 授权、模型文件准备与校验、导入表单填写、模型状态管理与常见问题排查,支持云端部署,提供高并发、低延迟的推理服务。
支持的模型
在我的模型页面,您可以管理以下两类模型:
- 调优模型:指在阿里云百炼调优后的模型,详见模型调优支持的模型。
-
导入模型:指从阿里云对象存储OSS导入的模型。支持导入部分经过 LoRA 微调或全参微调的模型。
导入全参微调后的模型属于白名单功能,如需开通请联系客户经理。
模型列表:- 华北2(北京)
- 新加坡
支持的模型
模型名称
千问3
千问3-32B
千问3
千问3-14B
千问3
千问3-8B
千问3
千问3-4B-Instruct-2507
千问3-VL
千问3-VL-8B-Instruct
千问2.5
千问2.5-72B-Instruct
千问2.5
千问2.5-32B-Instruct
千问2.5
千问2.5-14B-Instruct
千问2.5
千问2.5-7B-Instruct
千问2.5-VL
千问2.5-VL-72B-Instruct
千问2.5-VL
千问2.5-VL-7B-Instruct
数据更新可能存在延迟,请以导入模型时界面实际显示为准。
导入模型
接下来为您介绍如何通过阿里云百炼控制台从OSS导入模型。
导入模型不支持通过API或命令行操作。
- 在我的模型页面,单击导入模型,进入导入模型界面。
- 输入模型名称,并选择导入模型的基础模型(即被微调的模型)。
- 导入方式选择从OSS导入,暂不支持其它方式。您需要自行将已完成LoRA微调或全参微调的模型的相关文件上传至阿里云对象存储OSS。查看模型文件示例
- 单击确定后,系统将开始导入模型。在请求高峰时段,该过程可能需要较长时间,请耐心等待。
准备 LoRA 模型文件
导入前须将 LoRA 模型文件按以下要求存放在 OSS Bucket 的子目录中(不支持 Bucket 根目录),并在提交前通过系统的自动校验。模型文件须直接放在所选子目录下,系统会自动识别。
必需文件与目录结构
子目录中须包含以下文件:adapter_model.safetensors(LoRA 适配器权重,SafeTensors 格式)、adapter_config.json(含 rank、alpha 等参数的配置文件)、config.json(基础模型配置)。选中目录后系统会自动校验这些文件的格式与完整性。
训练参数约束
- rank 取值:rank 必须为 8、16、32 或 64 之一,且同一模型的所有 LoRA 层须使用相同的 rank 值,否则无法导入。
- 词汇表不可修改:训练中添加新 token 或修改原始词汇表的模型无法导入,须与基础模型词汇表完全一致。
- 对话模板不可修改:训练中修改 chat_template 的模型无法导入,须与基础模型默认配置一致。chat_template 位于 config.json 或 tokenizer_config.json 的 chat_template 字段。
- 视觉模型须冻结 VIT:视觉语言模型必须冻结 Vision Transformer 部分。若 LoRA 适配器中包含 visual 相关权重参数(即未冻结 VIT),该模型无法导入。
提交前自动校验
在导入页选中模型目录后,系统会自动调用文件校验接口检查目录下模型文件的格式与完整性。校验失败会在目录字段下方显示红标提示并阻断提交,须按提示修正文件后再提交。常见失败原因如缺少必需文件,对应错误码 AvailableModelFileNotFound。
导入表单字段
导入模型表单各字段含义如下:
字段 | 说明 | 约束 |
|---|---|---|
模型名称 | 输入模型的显示名称。 | 必填,最多 50 字符 |
基础模型 | 选择 LoRA 训练时的基座模型,须与训练基座一致。 | 必填,下拉选择 |
训练方式 | 可选项取决于所选基础模型,选择基础模型后自动渲染并默认选中第一项。 | 必填,下拉选择 |
导入来源 | 当前仅支持「从 OSS 导入」,无其他选项。 | 只读,默认选中 |
Bucket | 选择存放模型文件的 OSS Bucket,仅列出已添加 bailian-datahub-access=read 标签的 Bucket。 | 必填,下拉选择 |
模型目录 | 在选定 Bucket 中浏览并选择模型 Checkpoint 所在子目录,不支持选 Bucket 根目录。 | 必填,树形选择 |
模型加密 | 平台自动为导出的模型文件开启 OSS 服务端加密(SSE-OSS),使用 OSS 完全托管密钥,加密算法为 AES256。 | 只读,平台强制 |
后续操作
管理我的模型
在我的模型页面可查看当前业务空间内所有已调优和导入的模型,并执行部署、删除等操作。
删除:已部署的模型须先下线再删除;若模型来自模型调优,本操作不会删除模型调优界面中的记录。
状态与流转
导入的模型状态包括创建中、创建成功、创建失败和已失效。创建中表示正在导入;创建成功表示导入完成可部署;创建失败表示导入未成功;已失效表示创建成功后 OSS 源模型文件发生变更。列表对处于创建中状态的模型每 3 秒自动静默刷新,属正常行为,非接口异常。
创建失败状态旁附「详情」链接,悬停可查看失败错误码(如 AvailableModelFileNotFound)与对应的 oss://bucket/path 路径,用于定位失败文件。
已失效状态可悬停查看弹出框,展示「如下文件检测到更新」及发生变更的源文件名列表,提示须重新导入。
操作列可用性
每行操作列固定提供部署、增量训练和删除三个按钮,按钮可用性取决于模型状态:
- 部署:仅创建成功状态可点击,点击后跳转部署创建页,部署操作详见部署运维;其余状态或无可选部署方式时按钮不可用。
- 增量训练:从 OSS 导入的模型不支持增量训练,按钮不可用。
- 删除:创建中状态不可删除;量化模型须前往模型压缩界面删除。
调用我的模型
模型需成功部署后才能提供推理服务(只能通过API调用)。关于具体操作和计费方式,请参见部署后调用。
- 关键限制:在阿里云百炼调优后的模型部署成功后,只能使用其所在业务空间的 API-KEY 调用,且目前仅支持通过DashScope方式调用,不支持通过OpenAI兼容方式调用。
- 优化推理效果:请在调用时显式配置推理超参(如
presence_penalty、frequency_penalty和repetition_penalty等),并确保与您线下微调后的推理超参设置保持一致。
模型文件示例
-
LoRA微调后一般会生成两个checkpoint文件,分别是best_model_checkpoint(在验证集上表现最优的检查点)与last_model_checkpoint(最后一次保存的检查点)。您可以根据需求选择其中一个导入。
请确保导入的模型文件中包含adapter_model.safetensors和adapter_config.json。如需了解LoRA微调方法,您可以参考阿里云大模型ACP课程中的模型微调章节。
checkpoint 文件目录中通常包含以下文件:
global_step100/(子目录)、README.md、adapter_config.json、adapter_model.safetensors、additional_config.json、configuration.json、generation_config.json、latest、rng_state_0.pth和rng_state_1.pth。 - 全参微调需要导入的文件和开源模型保持一致。
常见问题
首次从 OSS 向阿里云百炼导入文件,应该如何操作?
首次从 OSS 向阿里云百炼导入文件,应该如何操作?
bailian-datahub-access标签,然后再进行导入。如果您尚不清楚主账号和子账号的概念和区别,请先阅读权限管理。
- 使用主账号
- 使用 子账号
- 单击前往授权。 在 导入方式 中选择 从OSS导入 后,页面会显示"您还未授权OSS"的提示信息,在提示栏右侧找到 前往授权 链接。
-
在弹出的对话框中,单击确认授权,系统将为您自动开通OSS服务关联角色(必要条件)。
通常秒级生效,服务高峰期可能会稍有延迟。
遇到”本次请求失败,尝试重新提交试试或联系管理员,错误码:10041495”怎么办
-
为目标 OSS Bucket 添加
bailian-datahub-access标签。该标签用于标记阿里云百炼可访问的 Bucket,未标记的 Bucket 阿里云百炼无法访问。
- 访问OSS管理控制台,单击左侧导航栏中的Bucket 列表,即可查看您已创建的Bucket。
- 在待添加标签的Bucket标签列,悬停鼠标于
图标上,然后单击前往编辑。 - 单击创建标签。
- 单击标签,添加标签名为
bailian-datahub-access,标签值为read的标签,然后单击保存。
-
返回导入模型界面,重新选择目标 Bucket 再尝试导入。
请注意,阿里云百炼不支持访问保存在 Bucket 根目录下的文件。请您选择 Bucket 下的现有文件夹或新建一个文件夹供阿里云百炼访问。
遇到“10041495”报错怎么办?
遇到“10041495”报错怎么办?
- 需主账号前往OSS管理控制台,按界面指引开通 OSS。
- 返回阿里云百炼导入模型界面,再尝试授权。
导入失败提示 AvailableModelFileNotFound 怎么办?
导入失败提示 AvailableModelFileNotFound 怎么办?
模型状态显示「已失效」是怎么回事?
模型状态显示「已失效」是怎么回事?
Bucket 下拉列表中目标 Bucket 不可选怎么办?
Bucket 下拉列表中目标 Bucket 不可选怎么办?
我的模型列表每隔几秒自动刷新是故障吗?
我的模型列表每隔几秒自动刷新是故障吗?
为什么导入的模型与本地使用 vLLM、SGLang 推理的效果不一致?
为什么导入的模型与本地使用 vLLM、SGLang 推理的效果不一致?
删除导入的模型会影响 OSS 中的源文件吗?
删除导入的模型会影响 OSS 中的源文件吗?
旧授权方式如何升级?
旧授权方式如何升级?