免費工具EbSynth將視頻變成手繪動畫

該工具最初發布於2019年7月9日。

初創公司Secret Weapons發布了EbSynth，這是壹個有趣的免費工具，可以將視頻素材轉換為風格化的“動態繪畫”。

該軟件將壹個或多個手動生成的樣式框架的外觀轉換為視頻中的樣式框架，從而創建手繪動畫的外觀。

基於樣式轉移和紋理合成的最新研究
EbSynth基於布拉格捷克技術大學和Adobe Research的研究，該研究由Secret Weapons創始人OndřejJamriška領導，該研究過去曾在CG Channel上展出。

EbSynth網站上展示了該團隊最新論文“通過示例風格化視頻”的演示視頻。

與該領域的其他工作不同，它不是基於機器學習的，而是使用非參數紋理合成算法的“最新實現”。

它現在計劃將EbSynth開發為獨立工具。

根據源素材和單個手繪參考框架進行創作
作為輸入，EbSynth僅需要源視頻（以標準2D文件格式轉換為圖像序列）和至少壹個靜止關鍵幀以供參考。

然後，軟件會自動將關鍵幀的樣式轉移到素材的其余幀，並保留“紋理連貫性，對比度和高頻細節”。

由於EbSynth無法使用任何基礎3D數據，因此無法準確樣式化關鍵幀中未顯示或完全丟失的部分對象。

這意味著關鍵幀應與素材緊密匹配-理想情況下，它應該是實際視頻幀的覆蓋圖-並且在每次重大更改視角後都建議使用新的關鍵幀。

另外，用戶可以提供遮罩以指定應將樣式化應用於視頻幀的哪些部分：例如，樣式化字符而不是背景。

在發布的演示視頻中判斷，開箱即用的效果非常好：當軟件從壹個關鍵幀移到另壹個關鍵幀時，會有明顯的過渡，當不工作時，角色和背景之間會出現“暈輪”區域帶有輸入蒙版，但輸出非常引人註目。

2020年8月14日更新：EbSynth現在已正式進入Beta版。

新功能包括自動填充文件名，這使得將圖像目錄拖到軟件中並使其自動處理成為可能，而不必手動輸入文件路徑。

該軟件現在還可以直接導出到After Effects，並在After Effects時間軸中自動對鏡頭進行排序；現在處理速度比原始版本“快10倍”。

有趣的是，自從EbSynth最初發布以來，壹些視覺特效師已開始使用該軟件來自動執行諸如調色和除斑之類的任務。

“他們編輯壹幀，然後EbSynth將更改分布到整個場景中，因此對於修飾，著色和通常處理視頻非常實用。”

可用性和系統要求
EbSynth在Windows和macOS的beta版中可用。該軟件是免費的，可用於商業用途。

來源：Jim Thacker/https://ebsynth.com/