數字王國與Xsens將“ DigiDoug”帶到TED演講臺

在超過25年的時間裏，數字王國（Digital Domain）壹直處於電影視覺效果的最前沿，為諸如《泰坦尼克號》和《美夢成真》等突破邊界的電影開發創新技術。

該工作室越來越多地在其劇目中加入數字效果，即逼真的，復雜的，寫實的演員娛樂節目，例如《本傑明·巴頓奇事》，《創:戰紀》和《復仇者聯盟》電影。在過去的兩年中，數字王國已將重心轉移到實時數字人類的可能性上，這些可能性在遊戲引擎中呈現，並且可以由真實人“驅動”或執行。

數字王國的Digital Human Group最近在TED演講中展示了其工作的早期成果，該工作室的軟件研發部負責人Doug Roble就該技術進行了演講。不僅僅是Doug與聽眾說話，還是“ DigiDoug”，這是Roble自己的夢幻般的數字復制品，他模仿了Roble自己的身體和面部在他上方的屏幕上的動作。令人驚嘆的結果是借助Xsens MVN慣性運動捕獲套裝實現的，該套裝由真正的Doug登場。

根據Roble的說法，該團隊在兩年前在SIGGRAPH上目睹了來自面部動畫專家Cubic Motion的“ Meet Mike”演示後，首先受到啟發來研究實時數字人類。這是Digital Domain已經專門從事的工作的另壹種不同方法，並且與其他正在進行的內部研發實驗相匹配。團隊很快就看到了進壹步探索它的潛力。

“遊戲引擎現在具備的渲染功能以及我們從機器學習實驗中獲得的速度的結合；我們認為，“天哪，我們可以將我們壹直在開發的用於功能質量工作的幾乎所有技術都應用於實時技術嗎？” Roble回憶道。 “在過去的兩年中，這就是我們所做的。”

要使DigiDoug栩栩如生，就需要融合廣泛的技術和專業知識。 USC創新技術研究所的視覺和圖形實驗室以驚人的細節捕捉了道格的臉，而Dimensional Imaging被用來捕捉他的面部動作，而Fox VFX Lab的頭盔攝像機則被用於舞臺上。

羅布（Roble）說，團隊在該項目上的大部分時間都花在解決問題和完善系統上。當有機會在TED演講中演示該技術時，並有史以來首次使用數字雙屏技術進行演示時，數字王國抓住了機會。但是，他們也知道，首次將這項技術帶出實驗室將是巨大的挑戰。

Digital Domain軟件工程師Melissa Cell解釋說：“我們曾想過，該系統將在演員們後臺的地方使用，但他們希望他在TED演講中登臺。” “幸運的是，我們使用的是Xsens，我們能夠讓他走上舞臺並被人盯上，因為它不需要攝像頭並且是基於慣性的。”

Xsens MVN系統基本上可以在任何地方使用，因為套裝中的傳感器可以捕獲所有動作，而無需捕獲臺或攝像機。這些套裝可以輕松存儲和運輸，然後在15分鐘內完成設置-筆記本電腦可用於當場捕獲數據。在舞臺上自由移動的能力對於交付TED演示至關重要。

隨著TED Talk的成功，Roble和團隊決定為SIGGRAPH的Real-Time Live！加倍，其中Roble和Cell都實時試用了兩個DigiDoug。對於Digital Human Group來說，這是壹個新的挑戰，但Xsens已經具備了應對這壹挑戰的能力。

Cell解釋說：“將兩個Xsens套裝連接到Xsens MVN軟件非常容易，它已經可以做到這壹點。”根據Roble的說法，他們的系統可能會進壹步擴展，甚至會有更多的數字人實時共享壹個舞臺。他說：“挑戰是從壹到兩個。” “增加更多不應該是……好，我應該在那兒停止講話。”

Roble看到了令人信服的，完全逼真的數字化雙打的巨大潛力。他不僅是Digital Domain電影VFX團隊的另壹個非常有用的工具，而且還看到了將數字雙打用於虛擬現實通信以及代表AI的未來。人們可以與之互動的系統。

Digital Domain具有功能強大的基於攝像頭的Mocap系統和舞臺，但是Digital Human Group在此項目中需要壹些不同的東西-便攜式，可適應且與其他捕獲技術互補的東西，而不論其位置如何。為此，Digital Domain需要Xsens。

Cell說：“由於我們主要是壹個研發小組，因此能夠在任何地方設立辦事處對我們真的很有幫助。” “ Xsens讓我們四處走動。我們可以在工程師正在工作的房間中直接運行它，也可以移到舞臺上。我們不必費力地工作，這對我們來說真的很有價值。”

“我們可以使用捕獲階段，但是Xsens的靈活性-能夠在道路上使用並能夠在我們的小隔間中實現-極其重要，” Roble表示。 “壹旦我們決定采用Xsens，我們就壹直在繼續。這是壹個很好的解決方案。”

記者： Mercedes Milligan
來源： Digital Domain
編輯：Sophia