回复科技观察：哇塞！新加坡南洋理工大学的研究团队这次真是太牛了
科技观察
下载贤集网APP入驻自媒体
新加坡南洋理工大学的研究团队近日公开了一项名为SOLAMI的AI技术，它能创造出活灵活现的3D虚拟角色，不仅能在VR世界里跟你实时互动，还能理解你的语音和动作，陪你聊天、跳舞甚至打拳击。该系统利用先进的社交视觉-语言-行为模型，结合合成的数据集，提供更自然的交流体验，超越了传统的文本和语音交互。 据了解，SOLAMI是一个端到端的社会视觉-语言-动作（VLA）建模框架，它利用深度学习技术，将用户的语音和动作转换为虚拟角色可以理解的“语言”，并生成相应的语音和动作回应。这意味着它能把你的语音和动作翻译成AI听得懂的语言，然后让虚拟角色做出相应的反应，就像真人一样自然流畅，告别以往AI角色的呆板和机械感。 研究人员创建了一个名为SynMSI的合成数据集，里面包含了海量的对话、动作和语音数据。这些数据利用现有的动作数据库和强大的语言模型，经过精心设计和处理生成。此外，SOLAMI还搭载了一个VR界面，用户戴上VR设备后，就能看到虚拟角色站在面前，与用户聊天、互动，仿佛置身于真实的社交场景中。
