日前,Meta推出面向开发者的全新工具“Meta XR Operator”,该工具以实验性组件形式包含于Meta XR SDK v205中。
其核心突破在于,支持MCP(AI工具与外部系统连接的通用标准)的AI代理,能够直接“观察”并操作在Meta XR Simulator中运行的VR应用程序。

当前,AI编程辅助已广泛覆盖代码编写、阅读及测试执行等环节,但在VR开发领域,自动化验证长期面临独特瓶颈——AI代理无法查看应用画面,也缺乏模拟按键操作的手段,导致测试流程在起步阶段便遭遇阻碍。Meta XR Operator正是为攻克这一难题而设计。
从技术实现看,该工具在应用与OpenXR运行时之间建立中间层,通过MCP协议将XR状态和输入控制权对外开放。由此,AI代理可执行截图抓取、读取墙壁和地板等空间信息、模拟控制器操作、查看Unity场景结构以及直接操控UI界面。画面数据仅在代理请求时传输,有效控制了对帧率的影响,且无需修改应用原有代码。
Meta设想了三种典型使用场景:渐进式功能迭代开发、从Bug复现到修复确认的完整闭环,以及依据自然语言步骤执行的自动化测试。在早期测试中,Beat Games等合作伙伴已利用该工具让AI代理独立完成从构建到验证的全流程,并在《Beat Saber》菜单画面中检测出此前自动化测试未能发现的UI重叠重叠缺陷。
不过,官方也明确了当前局限:手部追踪仅支持单手势瞄准,无法识别指级细节;不支持语音输入,也无法评估动画动态效果。该工具目前更适用于静态场景验证,而非涉及运动对象或时间敏感行为的测试。Meta计划于本季度内发布后续文章,深入讲解如何读取并操作Unity场景结构。(新闻来源:moguravr、VRAR星球编译)
商务合作:13146398132
媒体合作:13341147250
爆料投稿:editor@vrarworld.cn
版权声明:本文为VRAR星球原创,任何单位及个人未经授权不得转载,否则将依法追究侵权责任。
如需转载请联系13341147250 / editor@vrarworld.cn 申请授权,转载时请注明来源并保留VRAR星球原文链接。
本文部分图片及视频来源于互联网,如涉及侵权请联系我们删除。

新功能上线!XREAL One 系列上线手势新玩法

Meta发布了面向人工智能代理的新工具“Meta XR Operator”

AVITA发布面向虚拟化身和机器人的操作系统平台

英国计算机教育机构Digital Schoolhouse宣布与元宇宙平台Roblox建立合作伙伴关系

Virtualware签署协议收购英国VR软件公司Virtalis

VR太空游戏《Sol Protocol》将于9月在Quest 3平台发售

博士眼镜海南首家智能眼镜概念店三亚开业

王者荣耀首部VR沉浸式互动剧《星海奇航:梦境救援》在时空眼口碑拉满

大朋(DPVR)联合宽恒科技于广州举办游艺行业新品品鉴会

耐德佳将亮相2026北京国际自行车展,首发“景行”系列骑行AR光机模组

上半年智能眼镜市场高增,AR眼镜销量同比大涨109.4%

智能眼镜厂商Vuzix公布2026年第二季度财报,较去年同期下滑14%

新功能上线!XREAL One 系列上线手势新玩法

Meta发布了面向人工智能代理的新工具“Meta XR Operator”

AVITA发布面向虚拟化身和机器人的操作系统平台

英国计算机教育机构Digital Schoolhouse宣布与元宇宙平台Roblox建立合作伙伴关系

Virtualware签署协议收购英国VR软件公司Virtalis

VR太空游戏《Sol Protocol》将于9月在Quest 3平台发售