西北大学的工程师开发出了一种全新的全身动作捕捉系统，它不需要专门的房间、昂贵的设备、笨重的摄像机或一系列传感器。

相反，它需要一个简单的移动设备。

新系统名为 MobilePoser，利用已嵌入消费者移动设备(包括智能手机、智能手表和耳机)的传感器。通过结合传感器数据、机器学习和物理学，MobilePoser 可以实时准确地跟踪人的全身姿势和空间中的全局平移。

“MobilePoser 在移动设备上实时运行，通过先进的机器学习和基于物理的优化实现了最先进的精度，无需专门的设备即可在游戏、健身和室内导航方面开启新的可能性，”领导这项研究的西北大学的 Karan Ahuja 表示。“这项技术标志着移动动作捕捉的重大飞跃，使沉浸式体验更加触手可及，并为各个行业的创新应用打开了大门。”

Ahuja 的团队将于 10 月 15 日在匹兹堡举行的2024 年 ACM 用户界面软件和技术研讨会上发布 MobilePoser 。“MobilePoser：通过移动消费设备中的 IMU 进行实时全身姿势估计和 3D 人体翻译”将作为“姿势作为输入”会议的一部分进行。

Ahuja 是人机交互方面的专家，他是西北大学麦考密克工程学院的 Lisa Wissner-Slivka 和 Benjamin Slivka 计算机科学助理教授，并在那里指导感知、知觉、交互式计算和体验 (SPICE) 实验室。

当前系统的局限性

大多数电影迷都熟悉动作捕捉技术，这些技术经常在幕后花絮中展示。为了创造 CGI 角色(如《指环王》中的咕噜或《阿凡达》中的纳威人)，演员们穿着贴身的套装，套装上布满了传感器，在专门的房间里走来走去。计算机捕捉传感器数据，然后显示演员的动作和微妙的表情。

“这是动作捕捉的黄金标准，但运行该装置的成本高达 10 万美元，”Ahuja 说道。“我们希望开发一种易于使用、大众化的版本，基本上任何人都可以利用他们已有的设备来使用。”