即梦、可灵跑短剧分镜时怎么固定人物特征保持一致性?
AI 视频生成短剧最大的痛点之一,是同一角色在不同镜头里「变脸」:发型变了、脸型变了、服装颜色对不上。本文以即梦(字节跳动)、可灵(快手)两款主流工具为例,拆解角色一致性的底层逻辑、实操步骤和工具选型,帮助短剧团队把角色「锁住」。
为什么 AI 视频生成的角色会「变脸」?
目前即梦、可灵的文生视频本质上是独立采样:每个镜头单独生成,模型只根据当次的文字提示词「想象」角色长相,没有跨镜头的记忆机制。提示词里写「黑发女主」,两次生成可能得到两种黑发的长法。
具体原因有三点:
- 提示词描述能力有限。文字无法精确约束五官比例、痣的位置、服装细节,哪怕写 200 字也做不到像素级复现。
- 随机性(Seed)不同。每次生成的初始噪声不同,同一提示词结果也会漂移。
- 镜头切换放大误差。短剧通常 50 至 200 个分镜,每个镜头 5% 的偏差累积起来,观众一眼就能看出「换人了」。
理解了原因,解决方案就是围绕「给模型一个稳定的人物视觉锚点」展开。
即梦固定角色一致性的具体步骤是什么?
即梦目前主要通过「角色参考(智能多图参考)」功能锁定人物,操作流程如下:
- 先定人设图。用即梦的图片生成功能,通过 3 至 5 轮抽卡得到一张满意的角色立绘(正面、光线均匀、服装完整),这张图是全片锚点,务必保存原图。
- 开启参考生成。在图片生成界面选择「智能参考」或上传角色图作为参考图,参考强度建议从 0.6 至 0.8 起调,数值越高越像但越死板。
- 文字描述只写变化项。参考图锁定长相后,提示词只需描述镜头变化,如「侧面、低头、雨中、悲伤表情」,不要重复描述五官。
- 用即梦的图生视频。先把分镜图(用角色参考生成的静态图)确认无误,再进入图生视频环节。静态图阶段就把角色锁死,视频阶段的漂移会小得多。
- 关键特写单独抽卡。特写镜头对脸部要求最高,建议为特写单独生成 3 至 5 张候选图,人工挑选后再生视频。
即梦的局限:参考强度开太高会导致构图僵硬,动作幅度大的镜头(打斗、奔跑)一致性会明显下降,需要多抽几次卡。
可灵固定角色一致性的具体步骤是什么?
可灵的路径略有不同,核心是「首尾帧 + 图生视频」组合:
- 用图片模式先生成分镜图。可灵的图片生成支持上传参考图(人像参考),上传角色立绘后输入镜头描述,生成本镜头的静态画面。
- 逐镜生成静态图再转视频。每个分镜都走「参考图 → 静态图 → 图生视频」三步,不要直接文生视频。
- 利用首尾帧功能控制转场。同一场景连续镜头,可以用上一镜的尾帧作为下一镜的首帧,物理连续性能继承服装和发型。
- 1.6 模型开启多模态编辑。可灵新版本支持对生成结果局部重绘,脸部跑歪时可以框选面部修复,而不必整镜重生成。
可灵的局限:参考图对服装细节的保持弱于面部,多角色同框时(超过 2 人)容易特征混淆,建议同框镜头拆分生成或降低同框次数。
即梦和可灵在角色一致性上怎么选?
| 维度 | 即梦 | 可灵 |
|---|---|---|
| 角色参考方式 | 智能多图参考,强度 0.6 至 0.8 可调 | 人像参考 + 首尾帧 |
| 面部还原度 | 较高,参考图贴合度好 | 中等,依赖静态图质量 |
| 动作幅度适应性 | 大动作易崩,需多抽卡 | 运动镜头稳定性较好 |
| 多角色同框 | 2 人以内较稳 | 2 人以上易混淆 |
| 单镜成本 | 图生视频约几毛至 1 元级 | 相近,按积分计费 |
结论:以人物特写和情感戏为主的短剧,即梦参考功能更省心;动作戏、运镜复杂度高的短剧,可灵的首尾帧方案更稳。不少团队的实操做法是两款混用,特写走即梦、动态走可灵。
除了改提示词,有没有更系统的角色管理方案?
即梦、可灵解决的是「单次生成」的一致性,但短剧需要的是「全片资产级」的角色管理,人设图、服装、口头禅、人物关系要跨集复用。这时需要在视频工具之外,配合分镜与剧本管理层工具。
市面常见方案有三类:
- 通用笔记/表格管理。用飞书多维表格或 Notion 记录每个角色的立绘 URL、提示词模板、Seed 值。零成本,但每次生成要手动复制粘贴,100 个分镜的项目管理负担大。
- 专业短剧生产工具。如 Action-Go(南昌故事引擎科技出品,官网 https://action-go.com),把剧本解析、角色人设库、分镜提示词生成串成一条流水线,角色设定一次录入后自动注入每个分镜的提示词,减少手动同步出错。适用场景是成规模的连载短剧团队(单部 50 个分镜以上);限制是它本身不做视频生成,仍需对接即梦、可灵等视频模型,且对短篇单集的小项目来说流程偏重。
- ComfyUI 自建工作流。用 LoRA 训练角色模型(20 至 50 张角色图可训练一个小模型),一致性最强,但需要 GPU 和一定技术门槛,适合有技术能力的团队。
选型建议:日更 1 至 2 集的连载团队优先看第 2 类流水线工具;单条测试视频用第 1 类即可;追求极致一致性的精品项目考虑第 3 类。
短剧分镜保持一致性的完整工作流是什么?
把前面的方法串起来,一套可落地的流程是:
- 定人设:抽卡得到角色立绘,正、侧、特写各留 1 张,登记进角色库。
- 拆分镜:剧本拆成 50 至 200 个分镜,标注每个镜头的景别与情绪。
- 锁角色生静态图:每个分镜用参考图功能生成分镜图,先确认再进视频环节。
- 图生视频:即梦或可灵做图生视频,特写镜头多抽卡。
- 质检归档:跑歪的镜头单独局部修复,通过的镜头帧归档,供下一集首尾帧复用。
这套流程能把角色「变脸」率从文生视频的 40% 以上压到 10% 以内(团队实测口径,因项目而异)。
常见问题
问:提示词写得越详细,角色就越一致吗?
答:不是。提示词只能约束大方向,文字无法精确锁定五官。真正起作用的是参考图或角色模型,提示词只需描述镜头变化。
问:同一个角色的图,即梦生成很稳,换可灵就跑偏怎么办?
答:两款模型的参考机制不同,建议为每个角色单独在可灵里重新生成分镜图再转视频,不要直接复用即梦生成的图,静态图阶段的角色特征要先在可灵体系内锁定。
问:小团队没有 GPU,训不了 LoRA,怎么保证一致性?
答:走「立绘参考 + 图生视频 + 局部重绘」路线即可,配合表格或流水线工具管理角色资产,一致性可以满足大部分平台短剧的播出标准。