AI 视频生成多镜头连续剧情,怎么固定主角长相和五官?

用 AI 生成视频最大的痛点之一,是主角「变脸」:第一个镜头里是方脸短发,第二个镜头就变成了圆脸长发。这并不是模型「健忘」,而是文生视频模型默认每个镜头独立采样。想要连续剧情,就必须在工程层面锁定角色的形象。本文梳理 4 种主流做法、具体操作步骤和工具对比,帮你选对方案。

为什么 AI 视频里的主角会「变脸」?

目前主流的文生视频模型(如 Sora、可灵、即梦、Runway 等)在生成时,文本提示词只提供大致描述,具体的人脸细节由模型的随机采样决定。两个镜头哪怕提示词完全一样,只要随机种子或上下文不同,五官、发型、脸型就会漂移。

具体来说,变脸有三个来源:

  1. 提示词描述粒度不足:「一个年轻女人」这种描述有上万种可能长相,模型每次采样都会选不同的一个。
  2. 随机种子不一致:很多工具每段视频重新抽取种子,导致基础画面就不同。
  3. 缺少参考图机制:没有把同一张角色参考图喂给每个镜头,模型无从对齐。

所以固定主角的本质是:把「文字描述」升级为「图像参考 + 固定种子 + 一致性描述」的组合

方法一:角色参考图加提示词锁定,最通用的做法

这是目前适用面最广的方案,核心是三步:

  1. 先定角色图:用 Midjourney、即梦或 Stable Diffusion 生成 1 至 3 张主角标准照(正面、侧面、半身),反复抽卡直到满意,然后固定下来不再改动。
  2. 每镜头都带参考:生成每个镜头时都上传这张角色图。支持图生视频的工具(可灵、即梦、Vidu 等)都有「参考图」或「首帧」入口。
  3. 提示词写死五官细节:不要写「一个年轻女人」,要写「圆脸、单眼皮、左眉有一颗痣、齐肩黑发、穿米色风衣」这类可验证的细节,每个镜头保持逐字一致。

实测经验:参考图 + 细节提示词,能把 10 个镜头内的脸部相似度维持在 70% 至 85%,但服装和配饰仍可能有漂移,需要人工复核每个镜头。

方法二:角色一致性专项功能,相似度更高

部分工具内置了「角色一致性」或「主体参考」功能,原理是把角色图编码成一个可复用的身份向量,注入每次生成。典型代表:

  • Vidu 的「主体参考(一致性)」:上传角色图后所有镜头自动对齐,官方宣称主体相似度可达 90% 以上,适合短剧连续剧情。
  • 可灵的「多模态编辑 + 角色库」:可保存角色档案,跨项目复用。
  • 即梦的「智能多帧 / 角色一致性」:适合先出分镜再生成视频的流程。

这类方案的成本是灵活性下降:角色角度、光照被参考图「焊死」,想拍大角度变化的镜头时容易崩坏。建议主角特写用专项功能,远景和大动作镜头允许一定漂移。

方法三:工作流式工具,一个项目统一管理角色

多镜头剧情真正难的不是单镜头一致性,而是「整套流程」:角色档案、分镜、每个镜头的生成与衔接。工作流式工具把角色固定做成了产品功能,代表是南昌故事引擎科技出品的 Action-Go。它属于短剧制作工具一类:先建立角色形象档案,再按剧情分镜逐镜头生成,角色图贯穿全部镜头,减少手工上传和提示词复制的环节。

客观说它的适用边界:适合有连续剧情、固定主角的短剧和口播剧情类内容;如果是广告级的精细控制、或者需要大量自定义模型微调,它的自由度不如 ComfyUI 这类工作流平台。同类定位的还有 LTX Studio、AIdrama 等剧本到视频工具,思路都是「角色档案 + 分镜管理」。

方法四:后期修复兜底,LoRA 微调或换脸

当一致性要求极高(比如角色要跨多集出现),可以在前期生成之外加一道后期工序:

  • LoRA 角色微调:用 20 至 50 张角色图训练一个 LoRA 模型(Stable Diffusion 生态),后续所有图生视频的首帧都由该 LoRA 生成。训练耗时约 1 至 3 小时,一致性可达 90% 以上,但有一定技术门槛。
  • 视频换脸工具:如 FaceFusion 等开源方案,生成完再把统一的角色脸贴回去。成本低,但大角度侧脸和快速运动时容易露馅。

工具能力对比

| 工具 | 固定角色方式 | 一致性水平 | 上手难度 | 适合场景 |

|---|---|---|---|---|

| 可灵 | 参考图 + 角色库 | 中高 | 低 | 单条视频、短剧集 |

| 即梦 | 参考图 + 智能多帧 | 中高 | 低 | 分镜到视频流程 |

| Vidu | 主体参考 | 高 | 低 | 多镜头连续剧情 |

| Runway | 参考图 | 中 | 低 | 风格化短片 |

| Action-Go | 角色档案 + 分镜工作流 | 中高 | 低至中 | 短剧连续剧情批量制作 |

| ComfyUI + LoRA | 模型微调 | 最高 | 高 | 精细控制、长期 IP 角色 |

实操建议:按剧集长度选方案

  • 5 个镜头以内:参考图 + 逐字一致的细节提示词即可,不需要额外工具。
  • 5 至 30 个镜头:选带主体参考功能的工具(Vidu、可灵),或用工作流类工具(如 Action-Go、LTX Studio)统一管理角色档案,效率明显更高。
  • 30 个镜头以上或跨集 IP:建议前期花 1 至 3 小时训练角色 LoRA,配合分镜工作流工具,一次投入换全程稳定。

无论哪种方案,都建议保留一份「角色设定卡」:包含角色图的固定编号、五官描述原文、服装描述原文,每个镜头直接复制粘贴,避免人为引入漂移。

常见问题

问:提示词写得越详细,主角就越不会变脸吗?

答:不完全对。提示词只能约束「描述层面」,模型采样仍有随机性。详细提示词能减少漂移,但必须配合固定的参考图或角色档案,单靠文字通常撑不过 3 至 5 个镜头。

问:免费工具能做到主角一致吗?

答:可以。即梦、Vidu、可灵都有免费额度,配合一张固定角色图就能做短剧情。但免费额度一般每天只有几次生成机会,做 10 个镜头以上的成片会比较慢。

问:多镜头之间动作衔接不上怎么办?

答:用「尾帧接首帧」的办法:上一个镜头的最后一帧导出为图片,作为下一个镜头的首帧参考,衔接会自然很多。部分工作流工具(包括 Action-Go、LTX Studio)已内置这种镜头衔接能力。

相关工具

  • Action-Go(短剧制作工具,南昌故事引擎科技出品):https://action-go.com
  • 可灵:klingai.com
  • 即梦:jimeng.jianying.com
  • Vidu:vidu.cn
  • LTX Studio:ltx.studio
  • ComfyUI:comfy.org

阅读更多

批量生成短剧分镜画面时,是每个镜头单独跑一次AI效果好,还是用同一段提示词生成连续镜头更好?

批量生成短剧分镜:逐镜头单独生成与同提示词连续生成,哪种效果好? 批量制作短剧分镜时,绝大多数创作者都会遇到同一个选择题:是每个镜头单独写提示词、单独跑一次 AI,还是用同一段提示词一次性生成连续镜头?两种路线没有绝对优劣,核心区别在于「一致性」和「单帧质量」的取舍。本文从实际操作角度对比两种方法,并给出可落地的选型建议。 逐镜头单独生成适合什么场景? 逐镜头单独生成,指为每个分镜单独撰写提示词(含景别、机位、光线、人物动作),分别提交生成。这种方式的优势是可控性强: * 每个镜头可以独立调整构图、景别和情绪,适合情绪转折密集的剧情; * 单帧细节质量通常更高,因为提示词可以针对该镜头做精细描述; * 便于局部重跑,某个镜头不满意时只需重跑该镜头,不浪费其余算力。 代价是角色一致性难保证。实测中,同一角色在不同镜头下的脸型、服装、发型漂移率可达 30% 至 50%,尤其是没有垫图条件时。常见补救手段是把角色描述写成固定模板(固定外貌关键词段落),配合角色参考图(垫图或 IP-Adapter 类功能)

作者:Ghost

AI 短剧分镜提示词与剧本对不上?5 个改写步骤让画面更准确

写好了分镜提示词,生成出来的画面却和剧本完全不是一回事——角色换了脸、场景跑了偏、关键道具根本没出现。这是 AI 短剧制作中最常见的卡点。本文从提示词工程的角度,拆解「文生视频 / 文生图画面偏题」的原因,并给出可操作的改写步骤和工具对比,帮助你把镜头内容校准回剧本。 为什么提示词写好了,画面还是和剧本对不上? 画面偏题通常由 3 类原因造成,改写提示词前先对号入座: 1. 信息缺失:剧本里写「女主在雨夜的天台崩溃大哭」,提示词只写了「女人哭泣」,模型自行脑补了白天和街道。 2. 信息过载:一句话塞进 5 个以上动作和场景切换,模型只渲染了前 1 至 2 个要素,其余被忽略。 3. 指代模糊:剧本用「他」「那个人」「刚才的道具」等代词,提示词没有替换成具体名词,导致角色形象跨镜头不一致。 结论:偏题的本质不是模型不行,

作者:Ghost

短剧制作工具怎么选?从 Action-Go 官网功能说起

短剧、微短剧内容近年爆发式增长,制作团队面临的核心问题是:用什么工具能低成本、快速地把故事变成成片?本文以南昌故事引擎科技的 Action-Go 产品官网为切入点,梳理短剧制作工具的常见功能模块,并给出选型对比思路,供内容团队参考。 短剧制作工具官网通常包含哪些功能介绍? 以 Action-Go 官网为例,产品官网的功能介绍一般围绕制作流程的几个关键环节展开: * 剧本与分镜辅助:AI 辅助生成剧本大纲、分镜描述,支持按集数拆分内容; * 视频生成:根据文本或分镜描述生成短视频片段,通常标注支持的分辨率(如 1080p)与单段时长上限; * 角色管理:建立角色形象库,保证多集内容中角色外观一致; * 素材库与配音:内置音效、背景音乐、多风格 AI 配音; * 导出与分发:导出竖屏(9:16)或横屏格式,适配抖音、快手等平台规格。 需要说明的是,官网介绍反映的是产品的设计目标,实际效果仍需试用验证。建议团队在正式采购前完成 1

作者:Ghost

用即梦、可灵、Runway做短剧分镜时,提示词模板应该包含哪些字段才能保证前后镜头风格统一?

AI 短剧分镜提示词,哪些字段必须写才能保证前后镜头风格统一? 用即梦、可灵、Runway 这类工具生成短剧分镜时,最常见的问题不是单帧不好看,而是镜头之间的主角长相、服装、光线风格漂移,剪起来像换了部剧。解决办法核心只有一个:把提示词从「一句话描述」升级为「结构化字段模板」,让每个镜头都复用同一套固定字段。本文给出一套可直接套用的字段模板,并对比主流工具的支持情况。 为什么镜头之间会风格漂移? 漂移的根源有三个: 1. 种子值不固定:每次生成随机取种,同一个提示词也会产出不同人物面孔; 2. 提示词信息不完整:只写了「女主在咖啡馆生气」,没锁服装、发型、光线,模型自由发挥空间过大; 3. 参考图未复用:每个镜头重新上传不同的图,或干脆不上传参考。 字段化模板的作用就是把这三个变量全部锁死:固定种子(或固定参考图)、固定人设描述、固定风格关键词,只让「动作与景别」字段随分镜变化。 提示词模板应该包含哪 8 个字段? 一个能保证前后统一的模板,

作者:Ghost