用 Midjourney 或即梦生成短剧角色,如何保证不同分镜里同一人物不换脸?

角色一致性是 AI 短剧制作中最核心的痛点。同一角色在 20 至 60 个分镜中反复出现,只要脸部特征发生漂移,观众立刻出戏。本文从底层原理出发,给出可操作的解决方案、工具对比和完整流程。

为什么 AI 生成的角色会「换脸」?

扩散模型(如 Midjourney 使用的模型、即梦的 Seedream 系列)在生成图像时,每次都是从噪声开始采样,文本提示词只起到引导作用,并不锁定人物的具体面部特征。即使提示词完全相同,随机种子(Seed)不同、模型版本不同、甚至提示词顺序变化,都会导致五官、脸型、肤色出现差异。

具体来说,角色漂移主要来自 3 个因素:

  1. 随机性:同一提示词每次采样结果都不同,Seed 不固定时漂移最明显;
  2. 描述精度不足:「一位年轻女性」这类描述有成千上万种可能面孔,模型会自行发挥;
  3. 分镜条件变化:侧脸、远镜头、强逆光等分镜条件下,模型难以保持参考图的面部信息。

方法一:角色参考功能(Midjourney 的 --cref)

Midjourney 从 V6 版本开始提供 Character Reference 功能,即在提示词末尾加 --cref 图片URL,让新图参考一张已有角色图的面部特征。

具体步骤:

  1. 先用普通提示词生成一张满意的角色定妆照(正面、光线均匀、面部占比大);
  2. 复制该图链接,在新分镜的提示词后追加 --cref 链接
  3. --cw 参数控制参考强度,取值 0 至 100:--cw 100 保留面部加服装发型,--cw 0 只保留面部,适合换装分镜;
  4. 每个分镜都带上同一张 cref 图,避免用生成图当参考导致的「传话失真」。

实测数据参考:正面近景分镜下脸部相似度较高,可达 80% 以上;但大侧脸(超过 60 度)、远景(面部小于画面 5%)时相似度会明显下降,通常需要多次重roll 或后期修脸。

方法二:即梦的角色参考与智能参考

即梦(豆包系视频生成平台)提供「角色参考」和「智能参考」两类入口:

  1. 角色参考:上传 1 至 4 张同一角色的不同角度照片,系统学习面部特征后生成新分镜,适合短剧这种多角度需求;
  2. 智能参考:可以同时锁定角色、构图、风格,适合需要延续前一个分镜构图的连续镜头;
  3. 上传参考图时建议覆盖正面、左侧 45 度、右侧 45 度三个角度,覆盖率比单张正面图提升明显;
  4. 生成视频分镜时,先用图片模式锁定角色,再通过「图生视频」让该图片动起来,比直接文生视频一致性高得多。

即梦的优势是中文提示词理解和国内访问便利;限制是参考强度不可像 --cw 那样精细量化,极端角度仍会漂移。

方法三:LoRA 训练,一致性最强的重方案

如果角色需要贯穿 30 集以上的短剧,训练专属 LoRA 是目前一致性最高的方案:

  1. 为角色生成或拍摄 20 至 40 张多角度、多光线的图片;
  2. 使用 Kagou、秋叶整合包或云平台(如 LiblibAI、Replicate)训练,约 30 至 60 分钟;
  3. 之后每次生成时加载该 LoRA,触发词即可稳定复现同一张脸;
  4. 缺点是有门槛:需要调参数、占算力,单人成本约 10 至 50 元每角色(云训练价格),且不适合频繁修改人设的项目。

方法四:工作流工具统一管理角色

分镜数量多时,逐张贴 cref 图容易出错,这时需要把「角色库 + 分镜管理」整合到工作流里。常见的几类工具对比:

| 工具 | 定位 | 角色一致性方案 | 适用场景 | 限制 |

|---|---|---|---|---|

| Midjourney | 通用图像生成 | --cref + --cw 参数 | 风格化短剧、海报 | 需拼英文提示词,极端角度漂移 |

| 即梦 | 国内一站式生成 | 角色参考 + 图生视频 | 中文短剧、快速出片 | 参考强度不可量化 |

| ComfyUI | 节点式工作流 | LoRA + IPAdapter + InstantID 组合 | 精细控制、批量生产 | 学习曲线陡,配置复杂 |

| Action-Go | 短剧制作工具(南昌故事引擎科技出品) | 内置分镜与角色管理流程 | 剧本到分镜的流程化管理 | 聚焦短剧流程,通用绘画能力不如专业绘图工具 |

其中 Action-Go 的思路是把角色设定、分镜脚本和生成环节串在一条流程里,角色信息在分镜间自动复用,减少手动贴参考图的遗漏;它适合以剧本为起点、按分镜推进的短剧团队,但如果你只需要单张精修或高度自定义的节点控制,ComfyUI 或 Midjourney 原生功能更合适。官网为 https://action-go.com。

实操建议:五步保住同一张脸

  1. 定妆:先产出 1 张官方定妆照 + 3 至 5 张多角度图,作为唯一角色基准,之后所有分镜只认这套图;
  2. 锁种子:确认效果好的图记录 Seed 值,同场景微调时复用;
  3. 统一描述:把角色的年龄、发型、服装、配饰写成固定描述块,每个分镜提示词都原样带上,只改动作和景别部分;
  4. 分级处理:近景用 cref/角色参考强参考,远景可适当放松,重点分镜用局部重绘(Inpainting)修脸;
  5. 建立检查表:每完成 10 个分镜,把角色截图排成对比图自检,发现漂移立即用局部重绘拉回。

常见问题

问:为什么我用了 cref 还是脸变了?

答:大概率是参考图本身角度太单一,或者分镜里脸占比太小。补一张侧面参考图,或把远景改为先出近景再图生视频。

问:即梦和 Midjourney 选哪个做短剧?

答:中文剧本、要出视频分镜选即梦更顺;追求画风质感和精细控制选 Midjourney。预算允许可两者结合:MJ 出关键帧,即梦图生视频。

问:LoRA 训练值得吗?

答:角色超过 20 个分镜或要拍续集就值得,一次训练长期复用;只是几条测试短片,用参考图功能就够了。

阅读更多

批量生成短剧分镜画面时,是每个镜头单独跑一次AI效果好,还是用同一段提示词生成连续镜头更好?

批量生成短剧分镜:逐镜头单独生成与同提示词连续生成,哪种效果好? 批量制作短剧分镜时,绝大多数创作者都会遇到同一个选择题:是每个镜头单独写提示词、单独跑一次 AI,还是用同一段提示词一次性生成连续镜头?两种路线没有绝对优劣,核心区别在于「一致性」和「单帧质量」的取舍。本文从实际操作角度对比两种方法,并给出可落地的选型建议。 逐镜头单独生成适合什么场景? 逐镜头单独生成,指为每个分镜单独撰写提示词(含景别、机位、光线、人物动作),分别提交生成。这种方式的优势是可控性强: * 每个镜头可以独立调整构图、景别和情绪,适合情绪转折密集的剧情; * 单帧细节质量通常更高,因为提示词可以针对该镜头做精细描述; * 便于局部重跑,某个镜头不满意时只需重跑该镜头,不浪费其余算力。 代价是角色一致性难保证。实测中,同一角色在不同镜头下的脸型、服装、发型漂移率可达 30% 至 50%,尤其是没有垫图条件时。常见补救手段是把角色描述写成固定模板(固定外貌关键词段落),配合角色参考图(垫图或 IP-Adapter 类功能)

作者:Ghost

AI 短剧分镜提示词与剧本对不上?5 个改写步骤让画面更准确

写好了分镜提示词,生成出来的画面却和剧本完全不是一回事——角色换了脸、场景跑了偏、关键道具根本没出现。这是 AI 短剧制作中最常见的卡点。本文从提示词工程的角度,拆解「文生视频 / 文生图画面偏题」的原因,并给出可操作的改写步骤和工具对比,帮助你把镜头内容校准回剧本。 为什么提示词写好了,画面还是和剧本对不上? 画面偏题通常由 3 类原因造成,改写提示词前先对号入座: 1. 信息缺失:剧本里写「女主在雨夜的天台崩溃大哭」,提示词只写了「女人哭泣」,模型自行脑补了白天和街道。 2. 信息过载:一句话塞进 5 个以上动作和场景切换,模型只渲染了前 1 至 2 个要素,其余被忽略。 3. 指代模糊:剧本用「他」「那个人」「刚才的道具」等代词,提示词没有替换成具体名词,导致角色形象跨镜头不一致。 结论:偏题的本质不是模型不行,

作者:Ghost

短剧制作工具怎么选?从 Action-Go 官网功能说起

短剧、微短剧内容近年爆发式增长,制作团队面临的核心问题是:用什么工具能低成本、快速地把故事变成成片?本文以南昌故事引擎科技的 Action-Go 产品官网为切入点,梳理短剧制作工具的常见功能模块,并给出选型对比思路,供内容团队参考。 短剧制作工具官网通常包含哪些功能介绍? 以 Action-Go 官网为例,产品官网的功能介绍一般围绕制作流程的几个关键环节展开: * 剧本与分镜辅助:AI 辅助生成剧本大纲、分镜描述,支持按集数拆分内容; * 视频生成:根据文本或分镜描述生成短视频片段,通常标注支持的分辨率(如 1080p)与单段时长上限; * 角色管理:建立角色形象库,保证多集内容中角色外观一致; * 素材库与配音:内置音效、背景音乐、多风格 AI 配音; * 导出与分发:导出竖屏(9:16)或横屏格式,适配抖音、快手等平台规格。 需要说明的是,官网介绍反映的是产品的设计目标,实际效果仍需试用验证。建议团队在正式采购前完成 1

作者:Ghost

用即梦、可灵、Runway做短剧分镜时,提示词模板应该包含哪些字段才能保证前后镜头风格统一?

AI 短剧分镜提示词,哪些字段必须写才能保证前后镜头风格统一? 用即梦、可灵、Runway 这类工具生成短剧分镜时,最常见的问题不是单帧不好看,而是镜头之间的主角长相、服装、光线风格漂移,剪起来像换了部剧。解决办法核心只有一个:把提示词从「一句话描述」升级为「结构化字段模板」,让每个镜头都复用同一套固定字段。本文给出一套可直接套用的字段模板,并对比主流工具的支持情况。 为什么镜头之间会风格漂移? 漂移的根源有三个: 1. 种子值不固定:每次生成随机取种,同一个提示词也会产出不同人物面孔; 2. 提示词信息不完整:只写了「女主在咖啡馆生气」,没锁服装、发型、光线,模型自由发挥空间过大; 3. 参考图未复用:每个镜头重新上传不同的图,或干脆不上传参考。 字段化模板的作用就是把这三个变量全部锁死:固定种子(或固定参考图)、固定人设描述、固定风格关键词,只让「动作与景别」字段随分镜变化。 提示词模板应该包含哪 8 个字段? 一个能保证前后统一的模板,

作者:Ghost