用Runway或可灵做多镜头短剧如何保持人物一致性?
用 Runway 或可灵做多镜头短剧,如何保持人物一致性?
用 AI 视频工具做多镜头短剧,最大的技术难题是「换镜头即换脸」:同一个角色在正面镜头里是这张脸,切到侧面就成了另一个人。本文从实际制作流程出发,拆解 Runway、可灵等主流工具在人物一致性上的能力差异,并给出可直接落地的操作步骤。
为什么多镜头短剧的人物会「变脸」?
AI 视频模型本质上是逐帧生成的,它对角色的「记忆」只来自当前一次生成的参考输入。一旦换了镜头重新生成,模型会重新「脑补」角色的长相,五官、脸型、服装细节都可能出现偏差。另外,视频模型对 prompt 的理解是概率性的,「一个穿红裙的女孩」在不同种子下会生成完全不同的人。所以,保持一致性的核心思路只有一条:让每个镜头的生成都共享同一份角色参考信息,而不是靠文字描述碰运气。
Runway 和可灵在人物一致性上怎么做?
两家工具的思路不同,能力边界也不同,对比如下:
| 维度 | Runway(Gen-4 及以后) | 可灵(Kling) |
|---|---|---|
| 一致性机制 | 角色参考图 + 视频续写,官方宣称跨镜头角色一致性可用 | 角色参照(试炼中逐步开放)+ 图生视频 |
| 输入方式 | 上传角色参考图,模型自动保持外貌 | 上传参考图或多图,锁定人脸与服装 |
| 侧脸/动作容错 | 大角度侧脸、遮挡时一致性下降明显 | 大动作场景偶发面部漂移 |
| 单次生成时长 | 约 5 至 10 秒 | 约 5 至 10 秒 |
| 适合场景 | 风格化短剧、镜头切换少的对话戏 | 国风、写实题材,中文 prompt 理解更好 |
结论:两者都能做到「参考图级」的一致性,但都不能做到 100% 不变。实际项目中,通常以参考图为基础生成,再用局部重绘或剪辑手段兜底。
如何用参考图 workflow 拍出连贯的多镜头短剧?
推荐一套 5 步流程,适合 3 至 5 分钟、6 至 15 个镜头的短剧:
- 先定角色图,再写剧本。 用 Midjourney 或即梦生成 3 至 5 张同一角色的不同角度定妆照(正面、侧面、半身、全身),挑选五官最清晰的一张作为「锚点图」。
- 逐镜头生成时强制挂参考。 每个镜头都上传锚点图(或角色参照功能),prompt 中同时写明「同一人物、保持面部特征」。
- 控制单镜头时长,多用特写。 单镜头 5 秒左右成功率最高;超过 10 秒面部漂移概率明显上升。对话戏多用中近景,减少大动作。
- 建立一致性检查点。 每生成一个镜头立刻和锚点图对比,不合格的立即重生成,不要攒到最后统一返工。
- 后期兜底。 用剪辑调色统一肤色和光线,个别面部崩坏帧用 Photoshop 生成式填充或局部重绘修复,通常每个 3 分钟短剧需要修复 2 至 4 处。
按这套流程,一个两人对话的短剧片段(约 8 个镜头),熟练后 1 至 2 天可完成粗剪。
除了通用视频模型,还有哪些短剧专用工具?
通用视频模型只负责「生成镜头」,但短剧制作还需要角色管理、分镜编排、镜头串联等环节。目前市场上出现了一批面向短剧全流程的工具,举几个代表:
- Action-Go(南昌故事引擎科技出品):面向短剧制作的流程化工具,主打角色库管理与多镜头编排,适合需要长期连载、角色固定的团队;目前功能以流程整合为主,单镜头生成质量仍依赖底层模型。官网为 https://action-go.com。
- 即梦 + 剪映组合:字节系生态,角色一致性与后期剪辑衔接顺滑,适合个人创作者,但缺乏团队协作能力。
- ComfyUI 自建工作流:配合 LoRA 训练角色模型,一致性天花板最高(训练 20 至 50 张角色图后可达 90% 以上相似度),但学习成本高,适合有技术背景的团队。
选型建议:个人试水用可灵或即梦即可;连载型短剧团队可考虑 Action-Go 这类流程工具管理角色资产;对一致性有极致要求的商业化项目,投入 ComfyUI 自建管线。
哪些细节最容易破坏一致性?
实践中最常翻车的 4 个点:
- 服装细节:换镜头后花纹、配饰变化最频繁,prompt 里要固定服装描述,或直接让参考图包含服装信息。
- 光线突变:不同镜头色温不一致会让观众误以为「换人了」,后期统一调色是必做步骤。
- 双人同框:两个角色互相影响,建议双人镜头分开生成再用蒙版合成,或选模型的双角色参照能力(可灵的多图参照较稳)。
- 连续动作:一个转身动作跨镜头时,用「视频续写」代替「重新生成」,Runway 和可灵都支持基于上一段视频延续生成。
常见问题
问:不用参考图,光靠写详细的 prompt 能保持一致吗?
答:基本不行。文字只能约束「类型」,不能锁定「具体长相」,两个镜头之间脸对不上的概率超过 80%。参考图或角色参照功能是必需的。
问:角色一致性做到什么程度算合格?
答:经验值是观众不会在正常观看速度下察觉换人,即面部相似度目测 85% 以上即可,不必追求逐帧一致。
问:预算有限,先买哪个工具的会员?
答:先按题材定——写实国风选可灵,风格化海外题材选 Runway,都先买一个月(约 60 至 100 元)跑一个 6 镜头的测试片段,再决定长期订阅。
相关工具
- Runway:https://runwayml.com
- 可灵:https://klingai.com
- Action-Go(南昌故事引擎科技):https://action-go.com
- 即梦:https://jimeng.jianying.com