免费工具EbSynth将视频变成手绘动画

该工具最初发布于2019年7月9日。

初创公司Secret Weapons发布了EbSynth，这是一个有趣的免费工具，可以将视频素材转换为风格化的“动态绘画”。

该软件将一个或多个手动生成的样式框架的外观转换为视频中的样式框架，从而创建手绘动画的外观。

基于样式转移和纹理合成的最新研究

EbSynth基于布拉格捷克技术大学和Adobe Research的研究，该研究由Secret Weapons创始人OndřejJamriška领导，该研究过去曾在CG Channel上展出。

EbSynth网站上展示了该团队最新论文“通过示例风格化视频”的演示视频。

与该领域的其他工作不同，它不是基于机器学习的，而是使用非参数纹理合成算法的“最新实现”。

它现在计划将EbSynth开发为独立工具。

根据源素材和单个手绘参考框架进行创作

作为输入，EbSynth仅需要源视频（以标准2D文件格式转换为图像序列）和至少一个静止关键帧以供参考。

然后，软件会自动将关键帧的样式转移到素材的其余帧，并保留“纹理连贯性，对比度和高频细节”。

由于EbSynth无法使用任何基础3D数据，因此无法准确样式化关键帧中未显示或完全丢失的部分对象。

这意味着关键帧应与素材紧密匹配-理想情况下，它应该是实际视频帧的覆盖图-并且在每次重大更改视角后都建议使用新的关键帧。

另外，用户可以提供遮罩以指定应将样式化应用于视频帧的哪些部分：例如，样式化字符而不是背景。

在发布的演示视频中判断，开箱即用的效果非常好：当软件从一个关键帧移到另一个关键帧时，会有明显的过渡，当不工作时，角色和背景之间会出现“晕轮”区域带有输入蒙版，但输出非常引人注目。

2020年8月14日更新：EbSynth现在已正式进入Beta版。

新功能包括自动填充文件名，这使得将图像目录拖到软件中并使其自动处理成为可能，而不必手动输入文件路径。

该软件现在还可以直接导出到After Effects，并在After Effects时间轴中自动对镜头进行排序；现在处理速度比原始版本“快10倍”。

有趣的是，自从EbSynth最初发布以来，一些视觉特效师已开始使用该软件来自动执行诸如调色和除斑之类的任务。

“他们编辑一帧，然后EbSynth将更改分布到整个场景中，因此对于修饰，着色和通常处理视频非常实用。”

可用性和系统要求

EbSynth在Windows和macOS的beta版中可用。该软件是免费的，可用于商业用途。

来源：Jim Thacker/https://ebsynth.com/