先看怎么选
要把实拍表演变成CG角色并继续在三维软件制作,研究Flow Studio;已有镜头要改背景、物体或光线,看Runway Edit Studio;愿意绘制关键帧、希望保留表演做风格化,选EbSynth。先确定后续要改什么材料。
| 这一步要完成 | 相关工具 | 工具介绍 |
|---|---|---|
| 实拍与CG角色/三维场景 | 查看介绍 | |
| 已有视频与关键帧预览 | 查看介绍 | |
| 视频与手工/AI辅助关键帧 | 查看介绍 |
镜头已经拍好,想把演员换成CG角色;也可能只想改背景,或把一次表演变成绘画动画。这些任务都叫“改视频”,但输入材料、控制方式和后续能拿到的东西差别很大。
先看需要留下什么可编辑材料
Flow Studio把实拍中的演员动作、相机与CG角色合成联系起来,可导出动作捕捉、相机跟踪、干净背景等分项,并衔接Maya、Blender、Unreal等工具。Runway Edit Studio通过Aleph 2.0修改已有视频,当前流程先选关键帧、生成并预览修改方向,再应用到视频或选定范围。EbSynth则把艺术家修改的关键帧传播到其他帧,适合重绘、上色与风格化。Flow Studio官方说明、Runway当前编辑流程、EbSynth原理与建议
| 最核心的交付 | 对应的制作方向 |
|---|---|
| 还要在三维软件继续改动作、相机与合成 | Flow Studio的分项与场景交接 |
| 对现有镜头改背景、物体或光线 | Runway关键帧预览后生成修改 |
| 保留表演,用自己画的风格覆盖 | EbSynth关键帧传播 |
修改一个镜头,不等于只修改一张图
Runway当前支持先预览关键帧变化、用参考图引导,再生成整段或选定时间范围。这一步让作者先决定画面方向,但仍要考虑物体转身、遮挡和进入画面的时刻。当前帮助列出的编辑模式是Single edit;Multi-edit与Expand列为后续功能,不能把路线图写成已经可用。
Flow Studio的优势在交接材料。角色替换若还需要修正脚部接地、手与物体接触或灯光关系,分项输出允许进入熟悉的三维与合成软件继续做。与只得到一段成片相比,这会改变谁来接手、怎样继续修改,而非仅仅影响第一眼观感。
EbSynth官方特别说明:核心关键帧传播使用纹理合成算法,并不采用基于外部数据训练的生成模型;可选Generate Image才用于AI生成关键帧。把它简单称为“一键AI视频生成器”,会遮住艺术家需要画关键帧的实际工作。
它也给出了明确的修复思路:先从一个关键帧开始,对已经传播失效的区域再补关键帧;形状应对齐原视频;相互独立运动的脸、眼睛或背景可分轨处理。快速动作、模糊和遮挡越复杂,越需要关键帧与镜头组织,不是堆叠更长的风格描述就能解决。
交付时应说明留下的是合成成片、带透明通道的序列,还是可继续修改的三维材料。后续制作人需要的编辑范围,往往比“效果看起来有多强”更早决定工具。
工具推荐与取舍
将实拍转成可继续制作的CG镜头
Flow Studio
实拍与CG角色/三维场景
Flow Studio从实拍跟踪演员并将CG角色放入镜头,还将动作捕捉、相机跟踪和干净背景等材料作为可导出分项,与Maya、Blender、Unreal及USD工具衔接。需要继续修动作、相机和合成时,材料交接是关键价值。
- 适合谁用
- 有实拍表演、要做CG角色替换并进入三维后期流程的创作者。
- 选择前要知道
- 自动合成并不代表接触、遮挡和光线都已定稿;使用者仍需具备处理相应三维或合成材料的能力,导出范围应结合当前方案。
查看后续处理
- 分项导出到三维与合成工具
先预览关键帧,再改整段镜头
Runway
已有视频与关键帧预览
Runway Edit Studio当前用Aleph 2.0修改已有视频,可先选关键帧,通过文字和参考图形成预览,再应用到整段或选定时间范围。背景、物体、光线和风格等改动,可以先确定视觉方向再生成动态结果。
- 适合谁用
- 希望对已拍或已生成片段做明确视觉修改的人。
- 选择前要知道
- 当前Single edit可用,Multi-edit与Expand仍列为coming soon;输入长度、分辨率和剪切次数有要求,不能把整部长片当作一个镜头直接处理。
查看后续处理
- 整段或时间范围生成修改
把艺术家关键帧传播到视频
Ebsynth
视频与手工/AI辅助关键帧
EbSynth将修改过的关键帧纹理传播到其他帧,用于重绘、修饰和上色。艺术家想保留原片表演与运动、自己决定笔触和画面细节时,可从一个关键帧开始,在失效区域补充关键帧并分轨处理。
- 适合谁用
- 愿意画关键帧的动画作者、修饰或风格化视频制作人。
- 选择前要知道
- 核心传播是纹理合成而非生成AI;Generate Image是可选关键帧工具。形状不对齐、模糊和复杂遮挡可能导致波纹或拉伸,需要分段与补关键帧。
查看后续处理
- 纹理传播及分轨修复
推荐依据
核对官方当前VFX流程、分项导出、Runway可用模式与EbSynth算法说明;明确关键帧传播与生成AI的区别,不把路线图或成片观感当作功能保证。
依据官方功能说明与文档进行编辑筛选,按创作任务给出推荐;示例为编辑自拟,不作为产品实测结果。
参考资料
功能、套餐与使用条件,以对应产品的最新资料为准。
内容更新于 2026-11-11



