他们在Cruise找到了一个创造性的解决方案:人类手势的动作捕捉(mo-cap),一种游戏开发者用来创造角色的技术。 有两种类型的mo-cap系统:光学和非光学。 光学版的mo-cap使用分布在一个巨大网格状结构上的相机,这个结构围绕着一个舞台;来自这些摄像机的视讯流可以用来三角定位演员穿着的全身套装上的视觉标记的3D位置。
轨迹模块(橙色)会将所需的位置发送给PID控制器模块,然后该模块会将该值与mo-cap系统所确定的位置(紫色)进行比较。 这些飞行数据(粉红色)然后在各模块之间发送。
最后,研究人员用CMU的Mo-cap人体动作数据集喂给模型,数据集中的人物动作,现在可以迁移到你的纸片人身上了。