日前,Meta推出面向开发者的全新工具“Meta XR Operator”,该工具以实验性组件形式包含于Meta XR SDK v205中。
其核心突破在于,支持MCP(AI工具与外部系统连接的通用标准)的AI代理,能够直接“观察”并操作在Meta XR Simulator中运行的VR应用程序。

当前,AI编程辅助已广泛覆盖代码编写、阅读及测试执行等环节,但在VR开发领域,自动化验证长期面临独特瓶颈——AI代理无法查看应用画面,也缺乏模拟按键操作的手段,导致测试流程在起步阶段便遭遇阻碍。Meta XR Operator正是为攻克这一难题而设计。
从技术实现看,该工具在应用与OpenXR运行时之间建立中间层,通过MCP协议将XR状态和输入控制权对外开放。由此,AI代理可执行截图抓取、读取墙壁和地板等空间信息、模拟控制器操作、查看Unity场景结构以及直接操控UI界面。画面数据仅在代理请求时传输,有效控制了对帧率的影响,且无需修改应用原有代码。
Meta设想了三种典型使用场景:渐进式功能迭代开发、从Bug复现到修复确认的完整闭环,以及依据自然语言步骤执行的自动化测试。在早期测试中,Beat Games等合作伙伴已利用该工具让AI代理独立完成从构建到验证的全流程,并在《Beat Saber》菜单画面中检测出此前自动化测试未能发现的UI重叠重叠缺陷。
不过,官方也明确了当前局限:手部追踪仅支持单手势瞄准,无法识别指级细节;不支持语音输入,也无法评估动画动态效果。该工具目前更适用于静态场景验证,而非涉及运动对象或时间敏感行为的测试。Meta计划于本季度内发布后续文章,深入讲解如何读取并操作Unity场景结构。(新闻来源:moguravr、VRAR星球编译)
商务合作:13146398132
媒体合作:13341147250
爆料投稿:editor@vrarworld.cn
版权声明:本文为VRAR星球原创,任何单位及个人未经授权不得转载,否则将依法追究侵权责任。
如需转载请联系13341147250 / editor@vrarworld.cn 申请授权,转载时请注明来源并保留VRAR星球原文链接。
本文部分图片及视频来源于互联网,如涉及侵权请联系我们删除。

臣博视获友博资本A轮投资,将用于智能眼镜研发等场景

Cellid加入高通“Snapdragon START”计划,加速AR眼镜开发

Valve为Steam Frame打造配备热插拔电池的豪华音频头带

坐观式VR电影《半条被子》全国首映式在长沙举行

VR合作FPS游戏《Stuffed: Two Foot Hero》将于11月发售,PC VR试玩版现已推出

日式VR角色扮演游戏《菲奥娜骑士》将于下周在Quest和PC VR平台迎来最终章

MyDearest收购Roblox游戏工作室moze,加强Roblox的VR游戏开发和运营结构

EON Reality宣布在其工作辅助软件“Field IQ”中支持Meta VR眼镜

乐奇Rokid全球首家AI眼镜无人自助体验店登陆香港海港城

臣博视获友博资本A轮投资,将用于智能眼镜研发等场景

Cellid加入高通“Snapdragon START”计划,加速AR眼镜开发

Valve为Steam Frame打造配备热插拔电池的豪华音频头带

坐观式VR电影《半条被子》全国首映式在长沙举行

VR合作FPS游戏《Stuffed: Two Foot Hero》将于11月发售,PC VR试玩版现已推出

日式VR角色扮演游戏《菲奥娜骑士》将于下周在Quest和PC VR平台迎来最终章

MyDearest收购Roblox游戏工作室moze,加强Roblox的VR游戏开发和运营结构

EON Reality宣布在其工作辅助软件“Field IQ”中支持Meta VR眼镜

乐奇Rokid全球首家AI眼镜无人自助体验店登陆香港海港城