Development of edutainment system for global sound space recognition using silent region localization

使用静音区域定位开发全球声音空间识别的寓教于乐系统

基本信息

批准号：
19K12286
负责人：
岩谷幸雄
金额：
$ 2.75万
依托单位：
Tohoku Gakuin University
依托单位国家：
日本
项目类别：
Grant-in-Aid for Scientific Research (C)
财政年份：
2019
资助国家：
日本
起止时间：
2019-04-01 至 2024-03-31
项目状态：
已结题

项目摘要

静音領域定位の訓練方法について、実音源および仮想音場を用いた実験を引き続き行っている。実音源の実験では、８方向から無相関のホワイトノイズを放射し、どの方向から音がしていないかを判断させる実験を行った。フィードバックの有無による訓練効果は見られなかった。テストの日数の主効果だけが有意にきいていた。仮想音場を用いた実験では、フィードバックありの正答率が有意に向上していることが分かった。また、訓練時に使っていなかった音場の正答率を分散分析したところ、音源位置の主効果、交互作用が確認されなかった。このため、訓練に用いた音場との差が有意でなかったことが示唆され、静音領域定位の汎化が示唆された。これらの知見を加味し、仮想音場を用いたゲーム仕立ての訓練システムを開発中であり概ね完成しつつある。仮想音場を提示するためのエッジコンピューティング型聴覚ディスプレイの構築では、サーバを複数化することで、音場を合成するためのBinaural Room Impulse Response(BRIR)の長さを262144ポイント(44.1kHzサンプリングで6秒程度)まで長時間することが可能となった。これを応用することで、携帯端末等コンピューティングリソースが乏しいクライアントであっても超高精細な音場の合成が可能となる。静音領域定位訓練の試みの一部は、神奈川工科大学のE-スポーツシンポジウムや、日本音響学会の研究発表会等で招待講演の中で公開し注目を得た。

我们正在继续使用真实声源和虚拟声场进行静区定位训练方法的实验。在使用真实声源的实验中，从八个方向发出不相关的白噪声，并要求参与者判断声音不是来自哪个方向。无论有没有反馈，都没有观察到训练效果。只有测试天数的主效应是显着的。在使用虚拟声场的实验中，发现有反馈的正确答案率显着提高。此外，当我们对训练期间未使用的声场的正确响应率进行方差分析时，未确认声源位置的主效应或相互作用。这表明与用于训练的声场的差异并不显着，表明安静区域定位的泛化。考虑到这些发现，我们目前正在开发一个使用虚拟声场的类似游戏的训练系统，并且已经接近完成。在构建边缘计算听觉显示器来呈现虚拟声场时，通过使用多个服务器，用于合成声场的双耳房间脉冲响应（BRIR）的长度可以减少到262,144点（44.1kHz采样）。可以长时间握住相机（最多约 6 秒）。通过应用此技术，即使移动终端等计算资源有限的客户端也可以合成超高清声场。静区定位训练的一些尝试在神奈川工业大学电子竞技研讨会的特邀讲座和日本声学学会的研究报告中被揭露，并受到关注。