Real-time MRI database of articulatory movements of Japanese

日本人关节运动的实时 MRI 数据库

• 批准号: 20H01265
• 负责人: 前川 喜久雄
• 金额: $ 11.15万
• 依托单位: National Institute for Japanese Language and Linguistics
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Scientific Research (B)
• 财政年份: 2020
• 资助国家: 日本
• 起止时间: 2020-04-01 至 2024-03-31
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/en/grant/KAKENHI-PROJECT-20H01265/
• 关键词: リアルタイムMRI; データベース; 調音運動; 日本語; 音声学; 調音音声学; 音声合成; モンゴル語

本研究の主要な目標であるリアルタイムMRI撮像技術による日本語の調音運動データベースは「リアルタイムMRI調音運動データベース」第1版としてウェブ上でのデータ検索を可能にした(https://rtmridb.ninjal.ac.jp/)。１年前に公開した試験公開版と比較すると話者数は10名から22名に増えて当初目標を達成するとともに、音声に重畳して収録されていたMRI装置の稼働ノイズをデジタル音声処理によってほぼ消去することに成功している。さらに上記ウェブサイトで検索対象としている動画データを国立情報学研究所の音声言語コンソーシアムから公開した。以上によって音声研究のインフラ整備に関する当初目的は達成済みとなった。ウェブ版はこれまでに1000名以上の異なりユーザーによって利用されており、そのうち1割程度がリピーターである。データベースの公開作業以外には、近い将来におけるデータベースのバージョンアップを念頭において、①これまでに開発してきた音声器官輪郭抽出技術の効率化と、②MRI画像には映らないが音声研究上重要な門歯の形状を推定してMRI動画中に埋め込む手法に関する技術開発を行い、いずれも実用レベルの技術を開発することができた。またリアルタイムMRI動画からの音声合成技術についても研究を進めて、自然性の高い音声の合成に成功した。そのほかにはモンゴル語母音調和に関する知覚実験を実施した。また音声合成研究のために音素バランス文である「ATR503文」のリアルタイムMRIデータ収録を開始した。これは合成音声の品質向上のために必要とされるものであるが同時に連続音声に生じる調音結合現象の音声学的分析のためにも利用する予定である。これまでに男女各2名のデータを収録し、データ公開に必要とされる知財関係の処理を終了した。

这项研究的主要目标是使用实时MRI成像技术的日本发音机芯数据库，它是“实时MRI MRI发音运动数据库”的第一版，它可以在Web上进行数据搜索（https://rtmridb.ninjal.ac.ac.jp/）。与一年前发布的测试版本相比，演讲者的数量已从10增加到22，实现了其最初的目标，并几乎设法消除了MRI设备的操作噪声，MRI设备的操作噪声是使用数字音频处理在音频上叠加的。此外，国家信息学院的语言联盟已发布了上述网站搜索的视频数据。这导致了开发语音研究基础设施的最初目标的实现。到目前为止，已有1,000多种不同的用户使用了Web版本，大约有10％的重复客户。除了发布数据库外，我们还能够专注于在不久的将来更新数据库，目的是1）提高我们到目前为止开发的音频器官轮廓提取技术的效率，以及2）开发技术以估计门口的形状，这些技术对于音频研究很重要，但在MRI图像中却不在MRI图像中显示，并在MRI中显示了这些技术，并在MRI中进行了启动。我们还通过实时MRI视频对语音合成技术进​​行了研究，并成功合成了高度自然的声音。此外，进行了对蒙古元音和谐的感知实验。此外，对于语音综合研究，我们已经开始记录有关音素平衡句子“ ATR503句子”的实时MRI数据。这对于提高综合语音的质量是必不可少的，但也将用于对连续语音中发生的发音耦合现象的语音分析。到目前为止，已经记录了两个男人和女人的数据，并且已经完成了与数据披露所需的知识产权有关的处理。

项目成果

モンゴル語の母音生成時の声道断面積関数の分析

蒙古语元音发音过程中声道横截面积函数分析

• 发表时间: 2022
• 作者: Kato;Atsuhiko;風間伸次郎;美学会;伊藤貴雄;加地 優太，竹本 浩典，斎藤 純男，前川 喜久雄
• 通讯作者: 加地 優太，竹本 浩典，斎藤 純男，前川 喜久雄

31. リアルタイムMRI調音運動データベース 第1版 (rtMRIDB)

31.实时MRI关节运动数据库第一版（rtMRIDB）

リアルタイムMRI動画を用いた調音音声学の再構築―ワ行子音の問題―

利用实时MRI视频重建发音语音学——佤行辅音问题——

Aeroacoustic differences between the Japanese fricatives [s] and [h]

日语摩擦音 [s] 和 [h] 之间的空气声学差异

• DOI: 10.1121/10.0003936
• 发表时间: 2021
• 期刊: The Journal of the Acoustical Society of America
• 作者: Yoshinaga Tsukasa;Maekawa Kikuo;Iida Akiyoshi
• 通讯作者: Iida Akiyoshi

Variability in Production of Non-Sibilant Fricative [h] in /hi/

/hi/ 中非咝擦音 [h] 的产生变化

• DOI: 10.21437/interspeech.2022-303
• 发表时间: 2022
• 期刊: Proceedings INTERSPEECH 2022
• 作者: Tsukasa Yoshinaga;Kikuo Maekawa;and Akiyoshi Iida
• 通讯作者: and Akiyoshi Iida