Start-up公司已发布其最新版本视频转手绘动画技术。
这款基于浏览器的工具可将手动编辑参考帧的视觉效果迁移至整个视频,使其呈现手绘动画风格。
除完整视频转换外,该技术还可用于视觉特效与动态图形制作中的多项常规生产任务,包括rotoscoping(动态遮罩)与数字化妆效果。
值得注意的是,该技术无需借助AI即可将修改效果扩散至整个镜头。
EbSynth是什么?
我们几年前曾在CG Channel报道过这款当时还处于实验阶段的桌面应用程序。
其核心技术允许用户通过编辑静态帧来转换视频,随后EbSynth会自动将修改效果扩散至其余帧序列。
虽然最终效果可实现视频向手绘动画风格的完整转换,但EbSynth同样适用于更精细的调整。
例如,通过在视频某一帧中为演员进行数字绘妆,再利用EbSynth扩散该妆容效果。
Secret Weapons公司将其定位为“视频版Photoshop”。
EbSynth是否采用生成式AI?
尽管近五年来视频风格化技术日趋普及,但EbSynth实际上并非生成式AI工具。
它未采用基于外部数据集训练的生成模型,而是运用纹理合成算法。
该方法“在像素级别保留关键帧内容”,为最终效果提供更高可控性。
该技术已应用于理查德·林克莱特的动画电影《阿波罗10½号:太空时代的童年》制作,并为Netflix剧集《星期三》创作了动画序列。
EbSynth 2与初代版本有何不同?
EbSynth 2延续了初代版本的核心功能,但以更符合艺术家使用习惯的形式呈现。
其中一项变革是从桌面工具转型为基于浏览器的应用,不过Secret Weapons仍为工作室提供可部署在自有服务器上的自托管版本。
新版还配备了全新用户界面,包含时间轴、图层和画笔等熟悉功能。
但Secret Weapons向我们透露,最重大的改进在于纹理合成算法的性能提升,当前运算速度较之前“提升约10倍”。并且能够实时运行。
这意味着工作流程现在是交互式的:用户现在可以即时预览对源帧所做更改的结果。
无需提前准备完整图像却不确定传输到视频后的效果,现在可以进行更小规模的迭代调整。
此外,视频轨道和关键帧图层使得能够分别处理镜头的不同元素,从而让工作流程更加快速可控。
EbSynth 2是否在线存储数据?
EbSynth 2确实包含一项生成式AI功能,但该功能为可选配置。
全新的生成图像选项支持使用Stability AI模型生成风格帧,若启用此功能,最终生成的视频将遵循[Stability AI的服务条款]。
若手动创建风格帧,则视频受EbSynth自有[服务条款]保护。
Secret Weapons表示上传至其服务器的视频和静态帧在EbSynth完成动画合成后会立即删除,且相关数据不会用于AI训练。
价格与系统要求
EbSynth 2基于浏览器运行:开发者推荐使用Chrome。
免费账户支持导出720p分辨率的MP4格式视频。
专业版账户每月20美元,可将分辨率上限提升至4K,并新增PNG格式图像序列导出功能,以及每月AI生成100张图像的额度。
EbSynth还提供完全离线运行的命令行版本,该版本需询价购买。
