跳到内容 跳到导航

Research & Ideas

站内搜索

一种新的算法能够在VR更逼真的声音效果

现在我们有更快的工具可以无缝地同步声音和动作的模拟3D设置。

如果在虚拟环境中的品质下降板,软件可以生成声音在正确的时间。 |道格·詹姆斯的形象礼貌

当我们观看电影或玩视频游戏,正确的声音效果可以帮助使场景更加逼真的:当一个头发花白的赌徒在银幕轿车推出跨卡表银元,声音似乎旅行合不拢嘴,一招电影制造商可以通过拼接在预先录制的声音完成这一动作从扬声器喇叭。

但创建虚拟现实这种感觉已经因为VR是脱稿迄今几乎是不可能的。很难预测什么噪音的对象可能做出,或者他们可能会听到。为了使VR声音逼真,工程师必须创建的“声音模式”成为广大 - 预先录制的电脑等价物。每个声音模式将使VR系统的精确时刻它需要合成特定的声音。到现在为止,将采取计算机集群多小时,创造出一个完善的模型,因为将需要许多不同的模型来合成许多不同的潜在的声音,创造互动的环境,逼真的声音一直是一个可望而不可及的目标。

现在的计算机科学家在葡京体育发明了一种算法,可以在几秒钟内创建声学模型,使得它的成本效益来模拟许多不同的对象的声音在虚拟环境中。发生操作时,要求健全的,由以往的慢得多,仍处于实验阶段算法,产生的声音这种新的模式可以合成声音每位一样逼真。 “使其更容易创建模型使得它的实际建立与逼真的音效互动环境,”说 道格·詹姆斯,计算机科学与音乐礼貌任命的教授。

之前的算法来创造良好的模型,基于19世纪的科学家赫尔曼·冯·亥姆霍兹,谁给他的名字来描述声音如何传播的公式所做的工作。在此基础上的理论基础,设计的算法科学家创造3D音效模式:软件例程能够合成声音,因为这取决于那里的行动发生相对于听众的声音变化的数量和方向,似乎现实的。到现在为止,用于创建3D声学模型的最佳算法依赖于边界元法(BEM),一个缓慢的过程,实在是太昂贵用于商业用途。

詹姆斯和他的研究生的合作者,瑞贤王,开发了一种算法,计算声学模型成百上千次通过避免亥姆霍兹方程和边界元法更快。他们的做法是由20世纪奥地利作曲家弗里茨·海因里希·克莱恩,谁发现了一种混合了大量的钢琴音色和笔记到被称为母亲的和弦单,悦耳的声音启发。科学家 - 谁命名他们的算法kleinpat在点头,他的灵感 - 解释他们的做法是如何创建的声学模型 科学论文 他们是在计算机图形学和交互技术的ACM SIGGRAPH 2019会议上提出。 “我们认为这是一个改变游戏规则的互动环境,”詹姆斯说。