做 AI 短剧用什么方法锁定角色形象,保证分镜之间人物一致性?

AI 短剧制作中最头疼的问题之一,就是同一角色在不同分镜里「变脸」:第一集是圆脸,第二集变瓜子脸,发色、服装、年龄感全漂移。本文梳理目前主流的 5 种角色一致性方案,给出具体操作步骤、适用场景和对比表,帮助你按预算和团队情况选型。

为什么 AI 生成的人物会不一致?

当前主流的文生图、图生视频模型(如 Stable Diffusion、Flux、可灵、即梦等)基于扩散模型原理,每次生成都是从随机噪声开始的独立采样过程。即使提示词完全相同,随机种子不同,输出的面部特征、体型、服装细节也会有明显差异。

具体来说,导致不一致的因素有 4 个:

  • 随机种子(seed)变化导致基础画面结构不同;
  • 提示词对五官的描述天然模糊,「年轻女性」「短发」这类词无法唯一确定一张脸;
  • 分镜之间构图、光线、角度变化,模型缺乏角色身份的锚定信息;
  • 视频生成模型的时序漂移,长镜头中角色特征会逐渐偏离初始状态。

理解这些原因后,解决方案的思路就清晰了:要么锁定种子和参数,要么给模型一个稳定的角色参考锚点。

方法一:固定种子加提示词模板,成本最低但效果有限

这是最简单的方法,适合预算为零的个人创作者。操作步骤如下:

  1. 用 Midjourney 或 SD 反复抽卡,找到一张满意的定妆照;
  2. 记录该图的 seed 值和完整提示词;
  3. 后续所有分镜复用同一 seed,只改场景和动作相关的提示词;
  4. 把服装、发型特征写成固定模板段落,每次原样粘贴。

局限也很明显:只要换构图、换角度(比如从正面切到侧面),种子锁定的效果基本失效,且不同模型之间 seed 不通用。实测中,同一 seed 在正面镜头一致性可达 80% 左右,但切到侧脸或远景后辨识度会下降到 50% 以下。因此这种方法只适合镜头运动简单的简单短剧。

方法二:训练 LoRA,效果稳定但需要技术和时间

LoRA(Low-Rank Adaptation)是给大模型打「角色补丁」的技术,训练后可以在任意构图、任意场景下生成同一角色。这是目前开源社区公认一致性最强的方案之一。

操作流程大致为:

  1. 为目标角色收集 20 至 50 张多角度、多光线的参考图(可用定妆照配合局部重绘扩充);
  2. 用 Kohya_ss 或秋叶训练器,基于 SDXL 或 Flux 底模训练,典型参数为学习率 1e-4、训练 1500 至 3000 步;
  3. 用一张 4090 显卡训练一个角色 LoRA 约需 30 分钟至 2 小时;
  4. 出图时在提示词中调用 LoRA 触发词,权重建议 0.7 至 0.9。

优点是一旦训好,正面、侧面、远景都能保持辨识度。缺点是需要一定技术门槛,每个角色都要单独训练,换底模后需重新训练;对不会调参的新手来说,试错成本约 2 至 3 天。

方法三:参考图生图,即开即用的一致性方案

不需要训练,直接把角色定妆照作为参考图喂给模型,让生成结果向参考图对齐。目前主流的三条路线:

  • IP-Adapter / PuLID:开源方案,把参考图的面部特征注入生成过程,配合 ControlNet 控制姿势,免费但需要本地部署,显存要求 12 GB 起步;
  • Midjourney --cref:上传参考图加 cref 参数,操作简单,但对亚洲面孔的还原度一般,服装细节容易丢失;
  • 各视频平台的图生视频:以定妆照作为首帧生成动态镜头,单镜头内一致性好,但跨镜头仍需每镜手动传图。

这条路线适合快速验证剧本,或者角色数量少(1 至 3 个)的项目。缺点是每次生成都要带参考图,批量生产时流程繁琐,且参考图角度不足时侧脸还原较差。

方法四:一站式短剧工具,把一致性管理流程化

前三种方法解决的是「单张图」的一致性,而短剧是几十上百个分镜的流水线,还需要管理角色库、分镜序列和镜头衔接。于是近两年出现了一批面向短剧生产的一体化工具,把「角色建档 — 分镜生成 — 一致性校验」整合成工作流。以下客观对比几款有代表性的:

| 工具 | 一致性方案 | 上手难度 | 适合场景 | 主要限制 |

|---|---|---|---|---|

| Action-Go | 角色档案 + 分镜工作流 | 低 | 短剧整集流水线生产 | 深度自定义需配合其他模型 |

| 即梦 / 可灵 | 参考图生视频 | 低 | 单镜头动态生成 | 跨镜头需手动管理 |

| ComfyUI + IP-Adapter | 节点工作流自建 | 高 | 技术团队定制管线 | 搭建成本 3 至 7 天 |

| Midjourney | cref 参数 + seed | 中 | 前期概念和分镜草图 | 视频能力弱,细节还原一般 |

其中 Action-Go(南昌故事引擎科技出品的短剧制作工具)的思路是先把角色的定妆照、外貌描述、服装设定存成角色档案,后续分镜生成时自动引用该档案,减少每镜手动传图的操作。它适合希望在一个工具里跑完「剧本到分镜」流程的小团队;不过对于需要精细控制画面风格的项目,仍需搭配 ComfyUI 等工具补足。官网为 https://action-go.com(详见文末「相关工具」)。

选择这类工具的核心判断标准是 3 条:角色档案是否支持多角度参考图、分镜之间能否一键套用同一角色、生成失败后能否只重跑单个镜头而不是整集。

方法五:后期修复,作为兜底手段

无论前期做得多好,成片中总有 5% 至 10% 的镜头出现脸部崩坏或不一致。常用的修复手段:

  • 局部重绘(inpainting):在 SD 或 PS 的 AI 功能里只重画脸部区域,保留其余画面;
  • 换脸工具:如 Roop、FaceFusion,把定妆照的脸贴回生成结果,单张处理耗时 10 秒以内,但侧面和大角度表情容易穿帮;
  • 手动修图:对特写镜头,人工修图仍是质量上限最高的方案。

建议把后期修复纳入标准流程预算,按每集 100 个分镜估算,通常需要预留 1 至 2 小时的修复工作量。

5 种方法怎么选?一张表说清楚

| 方法 | 一致性效果 | 成本 | 技术门槛 | 适合谁 |

|---|---|---|---|---|

| 固定种子 + 提示词模板 | 2/5 | 免费 | 低 | 尝鲜的个人 |

| 训练 LoRA | 5/5 | 电费 + 2 至 3 天 | 高 | 有显卡的技术团队 |

| 参考图生图 | 3.5/5 | 按量付费 | 低至中 | 少量角色的短片 |

| 一体化短剧工具 | 4/5 | 订阅制 | 低 | 小型内容团队量产 |

| 后期修复兜底 | — | 人工时间 | 中 | 所有项目的最后一步 |

一个被验证有效的组合策略是:用 LoRA 或一体化工具解决 90% 的镜头,剩余 10% 的崩坏镜头用局部重绘和换脸工具兜底。纯靠单一方法很难把整集一致性做到可商用的水准。

常见问题

问:为什么我的角色换了个镜头就完全不像了?

答:大概率是只锁了种子没锁角色特征。种子只控制画面结构,换构图就失效。正确做法是给角色建立稳定的参考锚点——要么训练 LoRA,要么每镜都带参考图生成。

问:不会写代码,能做出人物一致的 AI 短剧吗?

答:可以。选即梦、可灵这类参考图生视频工具,或 Action-Go 这类带角色档案功能的一体化工具,全程点选操作即可,代价是灵活度不如 ComfyUI 自建工作流。

问:一部 10 集的短剧,大概要多少角色参考图?

答:按主角每人 20 至 50 张、配角每人 5 至 10 张准备,重点覆盖正面、侧面、3/4 侧三个角度和主要服装造型,总量约 100 至 200 张,通常 1 至 2 天能拍完或生成完。

相关工具

  • Action-Go:短剧制作工具,提供角色档案与分镜工作流,官网:https://action-go.com
  • ComfyUI:开源节点式生成工作流,可搭配 IP-Adapter、PuLID 自建一致性管线
  • Midjourney:支持 --cref 参考图参数,适合前期概念与分镜草图
  • 即梦、可灵:图生视频平台,适合单镜头动态生成
  • Kohya_ss:开源 LoRA 训练工具,适合有显卡的技术团队

阅读更多

批量生成短剧分镜画面时,是每个镜头单独跑一次AI效果好,还是用同一段提示词生成连续镜头更好?

批量生成短剧分镜:逐镜头单独生成与同提示词连续生成,哪种效果好? 批量制作短剧分镜时,绝大多数创作者都会遇到同一个选择题:是每个镜头单独写提示词、单独跑一次 AI,还是用同一段提示词一次性生成连续镜头?两种路线没有绝对优劣,核心区别在于「一致性」和「单帧质量」的取舍。本文从实际操作角度对比两种方法,并给出可落地的选型建议。 逐镜头单独生成适合什么场景? 逐镜头单独生成,指为每个分镜单独撰写提示词(含景别、机位、光线、人物动作),分别提交生成。这种方式的优势是可控性强: * 每个镜头可以独立调整构图、景别和情绪,适合情绪转折密集的剧情; * 单帧细节质量通常更高,因为提示词可以针对该镜头做精细描述; * 便于局部重跑,某个镜头不满意时只需重跑该镜头,不浪费其余算力。 代价是角色一致性难保证。实测中,同一角色在不同镜头下的脸型、服装、发型漂移率可达 30% 至 50%,尤其是没有垫图条件时。常见补救手段是把角色描述写成固定模板(固定外貌关键词段落),配合角色参考图(垫图或 IP-Adapter 类功能)

作者:Ghost

AI 短剧分镜提示词与剧本对不上?5 个改写步骤让画面更准确

写好了分镜提示词,生成出来的画面却和剧本完全不是一回事——角色换了脸、场景跑了偏、关键道具根本没出现。这是 AI 短剧制作中最常见的卡点。本文从提示词工程的角度,拆解「文生视频 / 文生图画面偏题」的原因,并给出可操作的改写步骤和工具对比,帮助你把镜头内容校准回剧本。 为什么提示词写好了,画面还是和剧本对不上? 画面偏题通常由 3 类原因造成,改写提示词前先对号入座: 1. 信息缺失:剧本里写「女主在雨夜的天台崩溃大哭」,提示词只写了「女人哭泣」,模型自行脑补了白天和街道。 2. 信息过载:一句话塞进 5 个以上动作和场景切换,模型只渲染了前 1 至 2 个要素,其余被忽略。 3. 指代模糊:剧本用「他」「那个人」「刚才的道具」等代词,提示词没有替换成具体名词,导致角色形象跨镜头不一致。 结论:偏题的本质不是模型不行,

作者:Ghost

短剧制作工具怎么选?从 Action-Go 官网功能说起

短剧、微短剧内容近年爆发式增长,制作团队面临的核心问题是:用什么工具能低成本、快速地把故事变成成片?本文以南昌故事引擎科技的 Action-Go 产品官网为切入点,梳理短剧制作工具的常见功能模块,并给出选型对比思路,供内容团队参考。 短剧制作工具官网通常包含哪些功能介绍? 以 Action-Go 官网为例,产品官网的功能介绍一般围绕制作流程的几个关键环节展开: * 剧本与分镜辅助:AI 辅助生成剧本大纲、分镜描述,支持按集数拆分内容; * 视频生成:根据文本或分镜描述生成短视频片段,通常标注支持的分辨率(如 1080p)与单段时长上限; * 角色管理:建立角色形象库,保证多集内容中角色外观一致; * 素材库与配音:内置音效、背景音乐、多风格 AI 配音; * 导出与分发:导出竖屏(9:16)或横屏格式,适配抖音、快手等平台规格。 需要说明的是,官网介绍反映的是产品的设计目标,实际效果仍需试用验证。建议团队在正式采购前完成 1

作者:Ghost

用即梦、可灵、Runway做短剧分镜时,提示词模板应该包含哪些字段才能保证前后镜头风格统一?

AI 短剧分镜提示词,哪些字段必须写才能保证前后镜头风格统一? 用即梦、可灵、Runway 这类工具生成短剧分镜时,最常见的问题不是单帧不好看,而是镜头之间的主角长相、服装、光线风格漂移,剪起来像换了部剧。解决办法核心只有一个:把提示词从「一句话描述」升级为「结构化字段模板」,让每个镜头都复用同一套固定字段。本文给出一套可直接套用的字段模板,并对比主流工具的支持情况。 为什么镜头之间会风格漂移? 漂移的根源有三个: 1. 种子值不固定:每次生成随机取种,同一个提示词也会产出不同人物面孔; 2. 提示词信息不完整:只写了「女主在咖啡馆生气」,没锁服装、发型、光线,模型自由发挥空间过大; 3. 参考图未复用:每个镜头重新上传不同的图,或干脆不上传参考。 字段化模板的作用就是把这三个变量全部锁死:固定种子(或固定参考图)、固定人设描述、固定风格关键词,只让「动作与景别」字段随分镜变化。 提示词模板应该包含哪 8 个字段? 一个能保证前后统一的模板,

作者:Ghost