数字王国与Xsens将“ DigiDoug”带到TED演讲台

在超过25年的时间里，数字王国（Digital Domain）一直处于电影视觉效果的最前沿，为诸如《泰坦尼克号》和《美梦成真》等突破边界的电影开发创新技术。

该工作室越来越多地在其剧目中加入数字效果，即逼真的，复杂的，写实的演员娱乐节目，例如《本杰明·巴顿奇事》，《创:战纪》和《复仇者联盟》电影。在过去的两年中，数字王国已将重心转移到实时数字人类的可能性上，这些可能性在游戏引擎中呈现，并且可以由真实人“驱动”或执行。

数字王国的Digital Human Group最近在TED演讲中展示了其工作的早期成果，该工作室的软件研发部负责人Doug Roble就该技术进行了演讲。不仅仅是Doug与听众说话，还是“ DigiDoug”，这是Roble自己的梦幻般的数字复制品，他模仿了Roble自己的身体和面部在他上方的屏幕上的动作。令人惊叹的结果是借助Xsens MVN惯性运动捕获套装实现的，该套装由真正的Doug登场。

根据Roble的说法，该团队在两年前在SIGGRAPH上目睹了来自面部动画专家Cubic Motion的“ Meet Mike”演示后，首先受到启发来研究实时数字人类。这是Digital Domain已经专门从事的工作的另一种不同方法，并且与其他正在进行的内部研发实验相匹配。团队很快就看到了进一步探索它的潜力。

“游戏引擎现在具备的渲染功能以及我们从机器学习实验中获得的速度的结合；我们认为，“天哪，我们可以将我们一直在开发的用于功能质量工作的几乎所有技术都应用于实时技术吗？” Roble回忆道。 “在过去的两年中，这就是我们所做的。”

要使DigiDoug栩栩如生，就需要融合广泛的技术和专业知识。 USC创新技术研究所的视觉和图形实验室以惊人的细节捕捉了道格的脸，而Dimensional Imaging被用来捕捉他的面部动作，而Fox VFX Lab的头盔摄像机则被用于舞台上。

罗布（Roble）说，团队在该项目上的大部分时间都花在解决问题和完善系统上。当有机会在TED演讲中演示该技术时，并有史以来首次使用数字双屏技术进行演示时，数字王国抓住了机会。但是，他们也知道，首次将这项技术带出实验室将是巨大的挑战。

Digital Domain软件工程师Melissa Cell解释说：“我们曾想过，该系统将在演员们后台的地方使用，但他们希望他在TED演讲中登台。” “幸运的是，我们使用的是Xsens，我们能够让他走上舞台并被人盯上，因为它不需要摄像头并且是基于惯性的。”

Xsens MVN系统基本上可以在任何地方使用，因为套装中的传感器可以捕获所有动作，而无需捕获台或摄像机。这些套装可以轻松存储和运输，然后在15分钟内完成设置-笔记本电脑可用于当场捕获数据。在舞台上自由移动的能力对于交付TED演示至关重要。

随着TED Talk的成功，Roble和团队决定为SIGGRAPH的Real-Time Live！加倍，其中Roble和Cell都实时试用了两个DigiDoug。对于Digital Human Group来说，这是一个新的挑战，但Xsens已经具备了应对这一挑战的能力。

Cell解释说：“将两个Xsens套装连接到Xsens MVN软件非常容易，它已经可以做到这一点。”根据Roble的说法，他们的系统可能会进一步扩展，甚至会有更多的数字人实时共享一个舞台。他说：“挑战是从一到两个。” “增加更多不应该是……好，我应该在那儿停止讲话。”

Roble看到了令人信服的，完全逼真的数字化双打的巨大潜力。他不仅是Digital Domain电影VFX团队的另一个非常有用的工具，而且还看到了将数字双打用于虚拟现实通信以及代表AI的未来。人们可以与之互动的系统。

Digital Domain具有功能强大的基于摄像头的Mocap系统和舞台，但是Digital Human Group在此项目中需要一些不同的东西-便携式，可适应且与其他捕获技术互补的东西，而不论其位置如何。为此，Digital Domain需要Xsens。

Cell说：“由于我们主要是一个研发小组，因此能够在任何地方设立办事处对我们真的很有帮助。” “ Xsens让我们四处走动。我们可以在工程师正在工作的房间中直接运行它，也可以移到舞台上。我们不必费力地工作，这对我们来说真的很有价值。”

“我们可以使用捕获阶段，但是Xsens的灵活性-能够在道路上使用并能够在我们的小隔间中实现-极其重要，” Roble表示。 “一旦我们决定采用Xsens，我们就一直在继续。这是一个很好的解决方案。”

记者： Mercedes Milligan

来源： Digital Domain

编辑：Sophia