Meta的新AI研究可能会增强Quest 3的功能

发布日期：2024-07-04 14:00:05

字号：A+A-

编译 / VRAR星球 R星人

外媒7月3日报道，Meta Reality Labs的研究人员最近发布了一个名为HOT3D （ “手和物体跟踪”的缩写）的数据集。它旨在帮助开发基于视觉的系统，以更好地理解手与物体的交互，从而实现新的应用。

图源：Meta Reality Labs

研究人员在论文中写道：“这样的系统将能够实现用户之间的手动技能转移，首先捕捉专家用户执行一系列手部与物体交互的动作（组装家具、发网球等），然后使用捕获的信息指导经验不足的用户，例如通过AR 眼镜。这些技能也可以从人类转移到机器人身上，使自主机器人能够即时学习。该系统还可以帮助人工智能助手更好地理解用户行为的背景，或为AR/VR用户提供新的输入功能，例如，将任何物理表面变成虚拟键盘，或将任何铅笔变成多功能魔杖。”

据悉，数据集是通Quest和其他（即将推出的）Meta设备录制的，包含超过800分钟的以自我为中心的视频记录，展示了与33种日常物品的互动。除了拿起、看和放下物品的简单场景外，该数据集还包括厨房、办公室和客厅环境中的典型动作。

商务合作：13146398132 undefined