据Uploadvr近日报道,开发人员发现了一种可不受限制访问Meta Quest 3直通摄像头的方法,这一发现是由XRWorkout健身应用的联合创始人兼首席开发者Michael Gschwandtner实现的。
图源:uploadvr
据了解,Meta Quest 3作为一款高端VR头显,其摄像头功能特别是直通摄像头(Pass-Through Camera)为用户提供了在虚拟世界与现实世界之间切换的便利。然而,Meta目前并不允许第三方开发者直接访问这些摄像头,这在一定程度上限制了开发者在VR应用中的创新。
Michael Gschwandtner巧妙地绕过了这一限制,通过以下步骤实现了对Quest 3直通摄像头的自定义访问:在应用内创建网页视图,即一个嵌入式的Chromium浏览器实例,用于加载支持Quest头显投屏的网页;然后,用户需要在该网页中完成Meta账号的登录,并启用Quest系统的投屏功能。
接下来,Gschwandtner的应用会对网页视图中的投屏画面进行像素采样,提取出透视摄像头的实时画面。随后,这些数据被送入谷歌的MediaPipe设备端SDK进行处理,以支持自定义的计算机视觉模型,如开源的MobileNet V2目标检测模型。
尽管这种方法实现了对直通摄像头的自定义访问,但它也存在一个显著的限制:投屏画面中除了透视摄像头的画面外,还包含虚拟物体和其他界面元素。这意味着该方法在透视画面占据大部分图像时效果最佳。针对这一限制,Gschwandtner已经设计了一个替代方案,但具体细节尚未公开。
商务合作:13146398132
媒体合作:13341147250
爆料投稿:editor@vrarworld.cn
版权声明:本文为VRAR星球原创,任何单位及个人未经授权不得转载,否则将依法追究侵权责任。
如需转载请联系13341147250 / editor@vrarworld.cn 申请授权,转载时请注明来源并保留VRAR星球原文链接。
本文部分图片及视频来源于互联网,如涉及侵权请联系我们删除。
PICO开始支持个人开发者自助上架+分发付费应用
谷歌将在I/O大会低调举办Android XR讲座
Reality Labs受到重创,Meta裁员上百人
OpenAI推出轻量级ChatGPT深度研究工具,免费用户也能用
Adobe挑战OpenAI,安卓/iOS版AI生图工具Firefly蓄势待发
Horizon Worlds现已支持音乐会等活动的3D 180°视频
影核VR新作《海上传奇:女王的崛起》登陆PICO平台
腾讯混元3D模型全新升级
Sightful推出推出适用于Windows的AR办公套装Spacetop,售价899美元
苹果将为Vision Pro原生支持Godot免费开源游戏引擎
Ray-Ban智能眼镜实用性大增,Meta推出实时翻译功能
Meta开卖翻新版Quest 3S,售价270美元起
The Sandbox与Bruce Lee Enterprises合作,李小龙“入驻”元宇宙
歌尔股份发布2025年Q1财报:净利润4.69亿元,同比增长23.53%
Vision Pro新专利:佩戴者眼球一动,实现解锁、切换设置等
北京国际电影节举办AI+VR项目创投会,VRAR星球参展
PICO视频新预告:3D穿越机带你飞掠绿野山居、地下迷窟、VR宇宙之旅第二季-宇宙射线
Character.AI推出AvatarFX模型:AI实现静转动,让图片角色开口说话