面向虚拟现实场景的房间脉冲响应计算模型

作     者：李知禹 王晶 岳欣雯 杨立东 赵胜辉 谢湘 LI Zhiyu;WANG Jing;YUE Xinwen;YANG Lidong;ZHAO Shenghui;XIE Xiang

作者机构：北京理工大学信息与电子学院北京100081 内蒙古科技大学数智产业学院包头014010 

出 版 物：《声学学报》 (Acta Acustica)

年 卷 期：2024年第49卷第6期

页      面：1186-1196页

核心收录：

学科分类：12[管理学] 1201[管理学-管理科学与工程(可授管理学、工学学位)] 081104[工学-模式识别与智能系统] 08[工学] 080203[工学-机械设计及理论] 0835[工学-软件工程] 0802[工学-机械工程] 0811[工学-控制科学与工程] 0812[工学-计算机科学与技术（可授工学、理学学位）] 

基　　金：国家自然科学基金项目(62071039) 内蒙古自治区科技计划项目(2023YFSW0006)资助 

主　　题：房间脉冲响应 深度学习 感知参数 虚拟现实 

摘      要：提出了一种面向虚拟现实应用场景的房间脉冲响应计算模型,将深度学习神经网络技术与心理声学感知参数结合,能够高效地从虚拟现实场景信息中预测具有听觉感知意义的房间脉冲响应。在确保高质量预测结果的同时,该模型可以满足虚拟现实音频场景中生成房间脉冲响应所需的实时性、高采样率、非受限长度和轻量化的要求。模型首先通过图卷积神经网络将场景中的声学信息编码,然后通过神经声场与转置卷积模型将声学信息解码得到房间脉冲响应感知参数,最后根据房间脉冲响应感知参数恢复出房间脉冲响应信号。实验结果表明,所提模型在房间脉冲响应生成质量、计算开销以及功能性方面都有较大的优势,可较好地满足虚拟现实音频对于实时生成房间脉冲响应的需求。