编译 / VRAR星球 R星人
新加坡南洋理工大学的研究团队近日公开了一项名为SOLAMI的AI技术,它能创造出活灵活现的3D虚拟角色,不仅能在VR世界里跟你实时互动,还能理解你的语音和动作,陪你聊天、跳舞甚至打拳击。
该系统利用先进的社交视觉-语言-行为模型,结合合成的数据集,提供更自然的交流体验,超越了传统的文本和语音交互。

图源:solami-ai.github.io
据了解,SOLAMI是一个端到端的社会视觉-语言-动作(VLA)建模框架,它利用深度学习技术,将用户的语音和动作转换为虚拟角色可以理解的“语言”,并生成相应的语音和动作回应。这意味着它能把你的语音和动作翻译成AI听得懂的语言,然后让虚拟角色做出相应的反应,就像真人一样自然流畅,告别以往AI角色的呆板和机械感。
研究人员创建了一个名为SynMSI的合成数据集,里面包含了海量的对话、动作和语音数据。这些数据利用现有的动作数据库和强大的语言模型,经过精心设计和处理生成。此外,SOLAMI还搭载了一个VR界面,用户戴上VR设备后,就能看到虚拟角色站在面前,与用户聊天、互动,仿佛置身于真实的社交场景中。
研究团队表示,SOLAMI技术应用前景非常广阔,未来可能颠覆游戏、虚拟社交和教育培训等多个领域。
商务合作:13146398132
媒体合作:13341147250
爆料投稿:editor@vrarworld.cn
版权声明:本文为VRAR星球原创,任何单位及个人未经授权不得转载,否则将依法追究侵权责任。
如需转载请联系13341147250 / editor@vrarworld.cn 申请授权,转载时请注明来源并保留VRAR星球原文链接。
本文部分图片及视频来源于互联网,如涉及侵权请联系我们删除。

亮亮视野携手腾讯云、荣耀推进沟通无障碍

运营约9年:苹果Apple Park游客中心撤下AR体验区

苹果新任CEO约翰·特努斯将Vision Pro比作个人电脑的早期时代

唱响鸟巢、沉浸星海!全景文学《星鱼》VR登陆天天中影汇“元趣世界”,打造“电影+”文化消费新范式

嘉年华虚拟现实体验板块落地嘉里中心、张园,静安打造全国XR内容创新策源地

将VR带入课堂,山东潍坊博物馆充分发挥育人效能

豪鹏科技首次亮相IFA 2026,以创新能源解决方案释放AI眼镜全天候潜能

《Demeo DnD: Battlemarked》推出全新战役模式,已支持Xbox

试点研究发现,VR能提升阅读障碍学生的英语词汇成绩

亮亮视野携手腾讯云、荣耀推进沟通无障碍

运营约9年:苹果Apple Park游客中心撤下AR体验区

苹果新任CEO约翰·特努斯将Vision Pro比作个人电脑的早期时代

嘉年华虚拟现实体验板块落地嘉里中心、张园,静安打造全国XR内容创新策源地

将VR带入课堂,山东潍坊博物馆充分发挥育人效能

豪鹏科技首次亮相IFA 2026,以创新能源解决方案释放AI眼镜全天候潜能

《Demeo DnD: Battlemarked》推出全新战役模式,已支持Xbox

试点研究发现,VR能提升阅读障碍学生的英语词汇成绩

“Android XR Bridge”工具将Quest独占内容带入PC VR