据Uploadvr近日报道,开发人员发现了一种可不受限制访问Meta Quest 3直通摄像头的方法,这一发现是由XRWorkout健身应用的联合创始人兼首席开发者Michael Gschwandtner实现的。

图源:uploadvr
据了解,Meta Quest 3作为一款高端VR头显,其摄像头功能特别是直通摄像头(Pass-Through Camera)为用户提供了在虚拟世界与现实世界之间切换的便利。然而,Meta目前并不允许第三方开发者直接访问这些摄像头,这在一定程度上限制了开发者在VR应用中的创新。
Michael Gschwandtner巧妙地绕过了这一限制,通过以下步骤实现了对Quest 3直通摄像头的自定义访问:在应用内创建网页视图,即一个嵌入式的Chromium浏览器实例,用于加载支持Quest头显投屏的网页;然后,用户需要在该网页中完成Meta账号的登录,并启用Quest系统的投屏功能。
接下来,Gschwandtner的应用会对网页视图中的投屏画面进行像素采样,提取出透视摄像头的实时画面。随后,这些数据被送入谷歌的MediaPipe设备端SDK进行处理,以支持自定义的计算机视觉模型,如开源的MobileNet V2目标检测模型。
尽管这种方法实现了对直通摄像头的自定义访问,但它也存在一个显著的限制:投屏画面中除了透视摄像头的画面外,还包含虚拟物体和其他界面元素。这意味着该方法在透视画面占据大部分图像时效果最佳。针对这一限制,Gschwandtner已经设计了一个替代方案,但具体细节尚未公开。
商务合作:13146398132
媒体合作:13341147250
爆料投稿:editor@vrarworld.cn
版权声明:本文为VRAR星球原创,任何单位及个人未经授权不得转载,否则将依法追究侵权责任。
如需转载请联系13341147250 / editor@vrarworld.cn 申请授权,转载时请注明来源并保留VRAR星球原文链接。
本文部分图片及视频来源于互联网,如涉及侵权请联系我们删除。

舜宇光学19亿“联姻”歌尔光学,加速AI/AR光学赛道整合

谷歌发布会透露:三款智能眼镜待发布,2027年将发布双目显示版

为Gemini AI装上“眼睛”:谷歌与XREAL联合发布Project Aura

特斯拉Optimus机器人演示时摔倒手忙脚乱“摘VR头显”,暴露并非完全AI驱动

《黑袍纠察队》官方VR衍生游戏《触发警告》宣传片公开

AStation将于12月16日举办第二届技术分享会

科技赋能文旅融合:影核签约云南,共建XR大空间数字体验新阵地

昀光科技完成A轮融资 正式启动12英寸硅基OLED产线建设

Meta收购超2.3亿元融资AI硬件公司

为Gemini AI装上“眼睛”:谷歌与XREAL联合发布Project Aura

全黑色苹果Vision头显部件曝光,或为Vision Air设计

扎克伯格官宣!苹果前VP执掌Meta AI硬件新部门

Meta收购超2.3亿元融资AI硬件公司

全球首款8K全景无人机,影石影翎A1开售首日国内销售额超2000万

《恐惧子午线》在1月发售前公布多人游戏模式

VR游戏《守护者:星陨》将于明年发布抢先体验版,看起来像VR版《地狱潜者 2》

理想汽车OTA 8.1开启推送:支持绑定理想AI眼镜

Meta MR眼镜发布时间推迟至2027年,26年将发布一款新的可穿戴设备