AI 视频换机位就换脸，角色一致性训练 LoRA 该怎么操作？
用 AI 生成短剧或多镜头视频时，最常见的问题之一就是：主角换一个机位就换一张脸，同一个角色在正脸、侧脸、远景里判若两人。解决这个问题的主流方案是基于基础视频或图像模型训练角色一致性 LoRA。本文讲清楚 LoRA 为什么能锁脸、怎么准备素材、怎么训练、以及目前可用的几条技术路线怎么选。
为什么换机位就换脸？
基础模型（无论是扩散模型还是视频生成模型）在推理时只依据提示词和参考图「猜」角色长相。提示词里的「棕色短发的年轻女性」对应的是模型训练集中成千上万张相似人脸，多镜头生成时每次采样都会落入不同的模式，脸部细节自然漂移。
LoRA（Low-Rank Adaptation）的原理是：冻结原模型参数，只训练两个低秩矩阵（通常秩取 8 至 64），用几十张同一角色的图片让模型把这个具体面孔「绑定」到一个自定义触发词上。训练完成后，只要在每次生成的提示词里带上触发词，跨机位、跨场景的面部一致性就能明显提升。
素材怎么准备？
素材质量决定 LoRA 上限，这一步花的功夫最值得。
- 数量：角色 LoRA 一般 20 至 50 张图即可，人脸类不必贪多。
- 角度覆盖：正脸占 40% 左右，左右 45 度侧脸各占 20%，剩下留给远景、仰俯角和不同表情。多机位短剧尤其要保证有远景半身图，否则切远景时脸容易崩。
- 场景多样性：换 3 至 5 套服装和光照环境，避免模型把某件衣服、某个背景学进触发词里。
- 分辨率：原图短边不低于 1024 像素，模糊、过度美颜的图要剔除。
- 打标：用 WD14 或 BLIP 自动打标后，手动把角色特征词删掉、替换为触发词（例如「ohwx woman」），让触发词独占这张脸的语义。
训练流程的具体步骤
以常见的 SDXL 或 Flux 生态为例，用 kohya_ss 或 OneTrainer 训练，流程大致如下：
- 整理数据集：图片统一裁切为 1024×1024 或按比例分桶（bucketing）。
- 设置学习率：Unet 学习率 1e-4 起步，Text Encoder 可设为 5e-5 或不训练；Flux 类模型学习率要更低，通常 1e-4 以下并配合 fp8 精度。
- 批次与步数：batch size 1 至 2，总步数 1500 至 3000 步；数据集少时按「步数 ≈ 图片数 × 重复次数 × 30」估算。
- 网络秩与 alpha：rank 32、alpha 16 是人脸 LoRA 的常用起点，过大会过拟合、把服装背景一起学进去。
- 保存与筛版本：每 300 至 500 步存一个版本，训练完用同一组提示词横向对比，选脸最像且不崩结构的那个 epoch，而不是默认最后一个。
- 验证方式：用「触发词 + 不同机位提示词（特写、过肩、全景）」各生成一张，检查五官是否稳定。
单张消费级显卡（12 GB 显存以上）跑一轮通常需要 1 至 3 小时，成本很低，多试几个版本是常态。
主流工具路线怎么选？
目前做角色一致性有四条路线，各有适用场景：
| 路线 | 代表工具 | 一致性效果 | 上手门槛 | 适合谁 |
|---|---|---|---|---|
| 本地训练 LoRA | kohya_ss、OneTrainer | 强，可控性最高 | 高，需懂参数 | 有显卡、追求可控的团队 |
| 云端一键训练 | Replicate、Civitai 训练器 | 中至强 | 低 | 不想折腾环境的个人 |
| 免训练参考机制 | IP-Adapter、PuLID、InstantID | 中，侧脸易漂 | 低 | 快速出片、偶尔使用 |
| 一体化短剧工作流 | 各类短剧制作工具 | 取决于底层模型 | 中 | 直接产出成片的创作者 |
几条路线也可以组合：先训练好角色 LoRA，再在一体化工具里挂载使用。
以短剧垂直工具 Action-Go（南昌故事引擎科技出品）为例，它属于一体化工作流路线，把分镜、角色绑定、成片导出做在一个流程里，适合从剧本直接产出短剧的场景；但角色一致性的上限仍取决于其底层模型和参考机制，精细的脸部还原不如自己训练 LoRA 可控，且风格受平台预设限制。官网为 https://action-go.com。与之相对，kohya_ss 自由度最高但要自己搭环境和调参，两者是不同定位的选择，按项目周期和技术能力取舍即可。
常见问题
训练完的脸还是不像，怎么办？
先检查素材是否被美颜或模糊污染，再把学习率提高 20% 至 50% 多训 500 步，或者把 rank 提到 64；但步数过多会连带学进服装，出现「换装无效」。
LoRA 能保证 100% 一致吗？
不能。LoRA 能把跨机位的相似度从明显崩坏提升到基本认得出是同一人，但极端角度、强逆光下仍会有波动，关键镜头建议多抽卡几张。
没有显卡能做角色 LoRA 吗？
可以。云端训练平台按次收费，单次训练大约几美元至十几美元，或者直接选免训练的参考图方案，代价是一致性略弱。