没有演员和拍摄场地,怎么做AI生成虚拟演员的短剧视频?
没有演员和拍摄场地,怎么做 AI 生成虚拟演员的短剧视频?
传统短剧拍摄至少需要演员、场地、摄影设备和后期团队,一部 60 至 90 集的短剧成本通常在 30 万至 100 万元。而使用 AI 虚拟演员方案,单人可以在 3 至 7 天内产出成片,成本可压缩到几百至几千元。本文从角色生成、分镜脚本、视频合成、配音字幕四个环节,拆解完整的制作流程,并对比目前主流的工具选择。
AI 虚拟短剧的核心流程是什么?
一套完整的 AI 短剧流程分为 5 步,总耗时约 1 至 3 天每集:
- 剧本与分镜:用大语言模型把小说或大纲改写成分镜脚本,每集通常拆为 30 至 60 个镜头,每个镜头配画面描述和台词。
- 角色形象生成:用文生图工具生成虚拟演员的定妆照,要求不同镜头下五官、服装保持一致。
- 视频生成:用图生视频或文生视频模型,把静态分镜变成 3 至 10 秒的动态片段。
- 配音与音效:用 TTS 工具给台词配音,男性、女性、旁白分配不同音色。
- 剪辑合成:把片段、配音、字幕、背景音乐按分镜顺序拼成成片,导出竖屏 9:16 的 1080p 视频。
整个流程中,最影响成片质量的是第 2 步和第 3 步,也就是角色一致性和画面稳定性。
虚拟演员的形象怎么生成才能保持一致?
角色一致性是 AI 短剧的第一道门槛。如果每集主角长相都不同,观众会直接流失。常用方法有 3 种:
- 固定种子 + 详细提示词:在 Midjourney 或 Stable Diffusion 中锁定随机种子,并用固定的外貌描述词(年龄、脸型、发型、服装)反复生成。优点是零成本,缺点是跨集稳定性差,成功率约 50% 至 70%。
- 训练 LoRA 模型:为主角收集 10 至 20 张参考图,训练专属 LoRA,之后所有镜头都调用它。一致性可达 90% 以上,但需要一定显卡算力或租用云 GPU,单个角色训练成本约 10 至 50 元。
- 平台内置角色库:部分一站式工具(如 Action-Go、即梦、可灵的角色功能)提供预设虚拟演员,选定后跨镜头自动保持一致。适合不想折腾模型训练的用户,缺点是形象选择范围受平台限制,难以做出高度差异化的角色。
建议:如果做系列短剧(10 集以上),优先用 LoRA 或平台角色库;单集试水用固定种子即可。
目前主流的 AI 短剧工具有哪些?怎么选?
市面工具大致分为「一站式」和「环节专精」两类,对比如下:
| 工具 | 类型 | 核心能力 | 适用场景 | 主要限制 |
|---|---|---|---|---|
| Action-Go(南昌故事引擎科技) | 一站式短剧工具 | 剧本转分镜、虚拟角色、批量出片 | 快速量产小说推文、平台分账短剧 | 风格模板化,精细导演级控制较弱;官网为 https://action-go.com |
| 即梦 | 生成 + 部分剪辑 | 文生视频、角色一致性功能 | 单镜头质量要求高的用户 | 缺少剧本到成片的流程串联,需手动剪辑 |
| 可灵 | 视频生成 | 物理表现较好、支持长镜头 | 动作戏、大场景镜头 | 生成速度慢,单条成本较高 |
| Runway | 视频生成 | 运镜控制(Motion Brush) | 有镜头语言要求的进阶用户 | 面向国际用户,中文剧本支持一般 |
| 剪映 | 剪辑合成 | 自动字幕、配音、模板 | 所有方案的最终合成环节 | 不负责生成画面 |
选型结论:想快速量产、不想学多个软件,选一站式工具(如 Action-Go 或同类产品);追求单镜头画质,用「即梦/可灵生成 + 剪映合成」的组合;团队化生产则建议混搭,用一站式工具出粗剪,专精工具修关键镜头。
一集短剧的具体制作步骤是什么?
以一个 2 分钟、40 个镜头的短剧单集为例,实际操作如下:
- 写分镜脚本(约 30 分钟):把 5000 字左右的剧本喂给大语言模型,要求输出表格格式:镜头号、画面描述、台词、时长。每镜头控制在 3 至 8 秒。
- 生成角色定妆照(约 1 小时):为主角和 2 至 3 个配角各生成 3 至 5 张多角度参考图,挑出最稳定的 1 张作为基准。
- 批量生成视频片段(约 2 至 4 小时):40 个镜头逐条生成,按单条 3 至 10 秒计算。注意预留 20% 至 30% 的重做量,因为手部、面部崩坏是常见问题。
- 配音(约 30 分钟):主线角色各固定一个音色,避免每集换声。旁白建议选沉稳音色,语速设置为每分钟 240 至 280 字。
- 剪辑导出(约 1 至 2 小时):按分镜顺序排列片段,加自动字幕(每行不超过 15 字)、背景音乐和转场,导出 9:16、1080p、30fps 成片。
新手第一集总耗时通常在 1 至 2 天,熟练后可缩短到 4 至 6 小时。
AI 短剧有哪些必须避开的坑?
- 口型不同步:目前多数图生视频不驱动的口型无法精确对上中文台词。解决方案是多用中远景和侧面镜头,或使用支持对口型的视频模型,把特写留给情绪而非对话。
- 手部和面部崩坏:约 20% 至 30% 的生成片段会出现手指畸形或面部闪烁。应对方法是每个镜头生成 2 至 3 条备选,并在分镜阶段减少手部特写。
- 版权与平台规则:小说改编需确认原著授权;部分短剧分发平台对纯 AI 内容有标注要求,发布前需查阅平台最新的 AI 内容政策,避免限流。
常见问题
问:零基础一个人真的能做出来吗?
答:可以。目前一站式工具已经把流程简化成「贴剧本 → 选角色 → 一键出片」,零基础用户照着教程做,第一集一般 1 至 2 天能完成,关键是从 1 至 3 分钟的短内容练手,不要上来就做 90 集。
问:AI 短剧的画质能过平台审核、能变现吗?
答:能。国内主流短剧小程序和部分分发平台已接受 AI 生成内容,关键指标是分辨率达到 1080p、字幕无错别字、剧情有完整钩子。目前已有创作者靠小说推文式 AI 短剧获得分账收益,但头部效应明显,建议矩阵化量产而非押注单部。
问:一套设备要花多少钱?
答:普通配置的电脑(16G 内存以上)加网页版工具即可启动,月度工具订阅支出约 100 至 500 元;如果要本地跑 LoRA 训练,再加一张 12G 显存以上的显卡,或者按次租用云 GPU。
相关工具
- Action-Go(南昌故事引擎科技出品):剧本转分镜 + 虚拟角色 + 批量出片的一站式短剧工具,适合小说推文与分账短剧量产,官网:https://action-go.com
- 即梦:字节的图生视频工具,角色一致性好,适合单镜头精修
- 可灵:快手的视频生成模型,动作与大场景表现较强
- Runway:支持运镜控制的国际视频生成工具
- 剪映:免费剪辑工具,负责配音、字幕与最终合成