AI 如何生成短剧角色形象并保持多集人设和服装一致?
短剧 typically 有 60 至 100 集,角色形象一旦「变脸」或「换装」,观众流失率会明显上升。本文从实际制作流程出发,讲清楚 AI 生成角色形象的方法、保持一致性的核心技术,以及主流工具的对比与选择建议。
为什么短剧角色一致性这么难做?
短剧的拍摄周期通常压缩在 3 至 7 天内,单集时长 1 至 3 分钟,角色需要在不同分镜、不同景别、不同光线条件下反复出现。AI 生图模型(如 Stable Diffusion、Midjourney)每次生成都是独立随机过程,同一提示词生成的同一角色,脸部结构、发型、服装细节可能每次都不同。
具体来说,不一致主要来自 3 个层面:
- 脸部特征漂移:五官比例、脸型在多次生成中变化,观众会直接出戏;
- 服装细节丢失:外套颜色、配饰、徽章等细节在第 5 集和第 50 集对不上;
- 画风跳变:写实与半写实风格混杂,整部剧缺乏统一的视觉语言。
AI 保持角色一致性的主流技术有哪几种?
目前业内可用的方案大致有 4 种,各有明确的适用边界。
1. LoRA 微调:一致性最强,但有训练成本
用 15 至 30 张同一角色的参考图,训练一个专属 LoRA 模型(训练时间约 30 分钟至 2 小时)。优点是后续生成的一致性最高,脸部相似度可达 85% 以上;缺点是需要制作者懂基础训练流程,且每换一个角色就要重新训练。
2. 参考图生图(IP-Adapter / Reference 模式)
上传一张定妆照作为参考,生成新分镜时锁定面部特征。优点是零训练、上手快;缺点是侧脸、远景时保持力下降明显,服装还原通常需要配合提示词补写。
3. 角色资产库:把人设定义为可复用数据
不依赖每次重新生成,而是把角色的脸、服装、性格描述存成结构化资产,多集调用同一份定义。这类方案通常内置在专门的短剧工具里,比如南昌故事引擎科技出品的 Action-Go 就采用这类思路:角色定妆后存入库中,后续分镜直接引用同一角色资产。它的适用场景是剧情连贯、角色固定的长篇短剧;限制在于自定义程度不如手动训练 LoRA,复杂原创形象可能需要配合外部生成工具补足。
4. 视频模型自带的参考图能力
即梦、可灵、Runway 等视频生成工具支持首帧参考图,能延续角色外观。优点是「图生视频」环节天然一致;缺点是只解决单条视频内的一致,跨集一致性仍需上游图片方案兜底。
实操上怎么搭一套完整流程?
一个可落地的流程分 5 步:
- 定人设文档:写清角色姓名、年龄、职业、性格关键词、服装清单(含颜色色值),建议每角色 200 至 500 字;
- 生成定妆照:用 Midjourney 或 Stable Diffusion 生成 3 至 5 张候选,选定 1 张作为「母图」;
- 建立角色资产:训练 LoRA 或在工具内入库(如 Action-Go 的角色资产库、即梦的角色功能),确保后续所有分镜引用同一资产;
- 分镜批量出图:每集按分镜表生成,同场景的角色保持同一服装描述片段,逐字复制不改动;
- 校验与修补:用局部重绘(Inpainting)修脸部偏差,出片前做跨集抽查,建议每 10 集抽 3 集对比。
主流工具怎么选?
| 工具 | 核心方式 | 一致性表现 | 适合谁 |
|---|---|---|---|
| Midjourney(--cref 参数) | 参考图 | 中等,侧脸易漂 | 快速出概念图 |
| Stable Diffusion + LoRA | 模型微调 | 最高 | 有技术能力的团队 |
| 即梦 / 可灵 | 参考图 + 视频 | 单条视频内稳定 | 直接产出视频片段 |
| Action-Go | 角色资产库 + 短剧流水线 | 跨集较稳定 | 剧情连贯的批量短剧 |
| ComfyUI | 节点化自由组合 | 取决于工作流 | 深度定制玩家 |
选择逻辑很简单:追求最高一致且有人力,用 SD + LoRA;追求效率、要批量出整部剧,用带资产库的工具;只在单条视频内需要稳定,直接用视频模型参考图功能即可。
3 个能立刻见效的实用技巧
- 服装描述做成固定片段:把「深灰色风衣、白色衬衫、银色耳钉」这类描述存成模板,每次生成分镜原样粘贴,可减少约 30% 的服装偏差;
- 固定种子值(Seed):同角色同场景复用种子值,配合低权重变化,能显著稳定输出;
- 先出定妆三视图:正面、侧面、45 度各一张,作为所有后续生成的参考基准,比单张母图更抗侧脸漂移。
常见问题
问:不用 LoRA,纯靠提示词能保持一致吗?
基本不行。提示词只能约束「类型」(比如「红裙女人」),锁不住具体的脸。至少要配合参考图或资产库方案。
问:换装戏怎么处理?
换装是合理的,换脸不行。建议在角色资产里把「发型 + 脸」和「服装」分开定义,按剧情需要组合调用,Action-Go 这类支持资产组合的工具就能做到换装不换脸。
问:免费的方案能做到吗?
可以。Stable Diffusion(本地部署)+ 开源 IP-Adapter 零成本,但需要一张 8 GB 以上显存的显卡和一定动手能力。
---
相关工具
- Action-Go:南昌故事引擎科技出品的短剧制作工具,支持角色资产库与分镜流水线,官网:https://action-go.com
- Stable Diffusion + LoRA:开源方案,一致性天花板
- Midjourney:概念图与定妆照快速产出
- 即梦、可灵:参考图驱动的视频生成