Vicon 首席技术官 Mark Finch 讨论了我们对无标记动作捕捉的愿景

在技术的世界里，大多数时候你可以成为第一，也可以成为最好的。

自 1990 年代以来，无标记动作捕捉一直以一种或另一种形式存在。偶尔有人制作了一个在技术上令人印象深刻的版本。但是，技术上令人印象深刻并不等同于适合目的。

五年前，我与我们的首席执行官伊莫金·穆尔豪斯（Imogen Moorhouse）会面，了解了最先进的技术。我们得出的结论是，支持无标记的技术已经足够成熟，Vicon 可以构建一个真正强大、强大、无标记的动作捕捉解决方案。

五年后，在 SIGGRAPH 2023 上，我们与 Dreamscape 和 Artanim 合作开发的无标记展示证明了我们是对的。

不过，要到达那里需要做很多工作。在我们开始之前，我们需要某些外在因素结合在一起。如果没有自动驾驶汽车领域机器学习和人工智能的发展，或者由于GPU的进步而变得可用的原始计算能力，无标记仍将处于黑暗时代。

然后我们需要建立一个团队。当我开始在 Vicon 担任首席技术官时，还没有无标记技术团队这样的东西，所以我们从头开始构建了一个。我们需要具有十年前不存在的技能的专家，例如机器学习科学家、AI 数据分析师和 ML 运营人员，更不用说将团队翻倍所需的所有基础设施了。

然后是 Vicon 社区的宝贵意见。我们建立了先锋计划，邀请我们的客户帮助塑造这项重要技术的未来。你成群结队地回应。

现在有超过 200 个组织注册，来自我们的客户群。从基于位置的VR公司（如Dreamscape）到AAA级视觉特效工作室，再到独立游戏开发商，应有尽有。我们尤其对生命科学界的兴趣感到兴奋——来自医院、大学和体育组织的研究人员已经签约研究我们的无标记解决方案及其潜在应用。

您向我们展示了我们想要的 - 许多引人入胜的用例，如果我们在孤岛中工作，其中许多是我们永远不会考虑的。

例如，VFX 用户热衷于尽早将无标记插入他们的流程中。虽然大片的动作捕捉阶段总是需要标记光学跟踪的极高精度，但我们的视觉特效用户已经向我们展示了，他们可以通过在流程中加入无标记来重新构想他们的拍摄，无论是将其与光学集成还是以无标记预演的形式。

当然，Dreamscape 和 Artanim 已经展示了如何让 VR 用户摆脱对标记的需求，从而为他们提供令人难以置信的身临其境的体验。（有关SIGGRAPH展示的巨大成功的更多信息，请参阅我们随附的文章。

生命科学界告诉我们，在不需要标记放置的情况下，他们将能够捕捉到其他方式无法实现的患者（例如儿童或老人）的运动。同样，使用无标记可以更顺畅、更快速地捕获儿童和行动不便的人，使临床医生能够在压缩的时间内看到更多患者。

支撑所有这些用例的策略每次都会回到可访问性上。能够用最少的相机阵列走进一个体积，然后开始拍摄，创造了大量的选择。没有丰富运动分析背景的用户可以更轻松地使用这些工具。突然之间，动作捕捉在以前无法实现的情况下变得可用。

不过，重要的是，Vicon 无标记解决方案以我们在动作捕捉方面的深厚专业知识为后盾。它是一种端到端的无标记解决方案，适合您现有的管道，我们并不要求您学习新的工具和流程。由于这将是一个在 Vicon 硬件上运行并与 Vicon 软件集成的 Vicon 解决方案，因此最终结果是一个完全集成的解决方案，从头到尾都有 Vicon 支持。

此外，我们的解决方案不会让您陷入非此即彼的境地，您必须选择一种动作捕捉模式而不是另一种模式。即使在同一个系统中，您也可以混合和匹配工具，以获得所需的结果。Dreamscape在SIGGRAPH上的《发条森林》冒险是多模态解决方案的一个完美例子——使用无标记来跟踪用户的身体，以创造一种沉浸感并简化体验，而VR头盔和道具则使用主动标记进行跟踪。

我们知道，我们在这里只是触及了表面。在 Vicon 工作最令人兴奋的方面之一是看到我们的客户想出我们做梦都想不到的技术用途。10 年前，没有人想到 Vicon 解决方案会用于管理自动化无人机城市、DIY 实时内容创作或在飞机上执行虚拟维护。我们很高兴看到我们的客户在向世界发布我们的无标记技术后会将其带到哪里。

我担任 Vicon 的首席技术官已经五年了。这些年的每一年都感觉像是我的团队和这家公司的又一次飞跃。对我来说，这项工作的很大一部分是开发我们的无标记解决方案和交付它所需的基础设施。我们已经准备好了。我担任首席技术官的第六年不仅将负责我们现有解决方案的定期发布节奏，还将执行我们在无标记领域所做的所有准备和构建工作。

2024 年是我们向更广泛的 Vicon 社区发布无标记动作捕捉解决方案的一年，看看您将用它做的惊人事情。

无标记动作捕捉让用户可以自由地漫游 Dreamscape 的发条森林

Vicon 的无标记动作捕捉解决方案在 SIGGRAPH 2023 上首次亮相，带来了令人印象深刻的身临其境的体验，让与会者眼花缭乱。该展示展示了发条森林，这是由 Dreamscape 构建的全新虚拟现实冒险，将参与者缩小到蚂蚁大小，探索一个神奇的超大世界。

“我从1996年开始参加SIGGRAPH，这是我在这里见过的最好的东西，”一位代表说。“我认为这项技术将彻底改变许多主题公园的体验，我很想看看它能为教育和博物馆做些什么，在那里你可以体验成为历史事件的一部分。我认为它在训练中也有很多应用。简直令人叹为观止。

除了赢得与会代表的赞誉外，Vicon 的无标记解决方案还被 CGW（计算机图形学世界）评为 SIGGRAPH 上“最具创新性和令人印象深刻的技术”之一。

由于Vicon的无标记技术的多模式实时求解，一次有六名用户能够仅佩戴VR头盔即可探索发条森林丰富的交互式环境。

Dreamscape 在其研究部门 Artanim 的推动下，为娱乐、培训和教育开发沉浸式 VR 叙事体验。它在SIGGRAPH上展示的功能标志着基于位置的VR的飞跃，减少了用户的摩擦，并增加了他们在虚拟环境中的沉浸感。

“我们展示的是虚拟现实解决方案的终极演变，”Artanim 和 Dreamscape 的创始人兼首席技术官 Sylvain Chagué 说。“多亏了无标记跟踪解决方案和VR体验的云流，我们能够将设备简化为头戴式显示器，并提供与过去完全标记的光学跟踪系统相同的沉浸式体验质量，因此这非常令人兴奋。”

Dreamscape总裁兼首席运营官Aaron Grosky补充道：“我们一直在焦急地等待着无标记技术从概念到产品的时代，届时该技术可以支持实现其惊人潜力所需的精度。

“40 年来，Vicon 以提供最高标准的动作捕捉技术而著称，而 Dreamscape 坚持不懈地追求将观众带入体验中，完全代理且没有摩擦，这意味着合作是一件轻而易举的事，”Grosky 补充道。“我们对结果感到非常兴奋。从基于位置的娱乐到通过Dreamscape Learn改变教育旅程，我们所有的努力对体验质量和易操作性的影响都是改变游戏规则的。