大規模データに基づく音声対話の音声的・言語的特徴の分析及び音声言語処理での利用

基于大规模数据的口语对话语音语言特征分析及其在口语处理中的应用

基本信息

批准号：
09780341
负责人：
傳康晴
金额：
$ 1.54万
依托单位：
Nara Institute of Science and Technology
依托单位国家：
日本
项目类别：
Grant-in-Aid for Encouragement of Young Scientists (A)
财政年份：
1997
资助国家：
日本
起止时间：
1997 至 1998
项目状态：
已结题

项目摘要

本研究では,人間同士の音声による会話を収録したデータを用いて,言い淀み,言い直しなどの非流暢的現象や話者交替,相づちなどの会話相互作用について分析し,人間の音声言語行動のモデル化と対話システムへの応用に関する研究を行なう.本年度の研究項目は以下の2点である.1. 相づち応答における韻律情報の関与前年度に行った,相づち生起個所の韻律特徴の分析に基づき,話し手の発話中の韻律特徴を一部人工的に改変することで,聞き手の相づちを促進したり,抑制したりできるかを心理実験によって検証した.その結果,ポーズ直前の音調を昇降調(尻上がりイントネーション)にすることで,わずかに相づちが増加することがわかった.これは前年度のコーパスからの機械学習に基づく結果と一致するものであり,昇降調のような韻律特徴が,相づち産出のタイミングの制御だけでなく.聞き手からの相づちを要求する目的にも利用できることを示している.2. やり取り構造と発話間時間長との関係の分析千葉大学地図課題対話コーパスおよび奈良先端大自由会話コーパスを用いて,働きかけ・応答・補足からなる会話のやり取りの構造と発話間の移行時間長との関係を統計的に分析した.その結果,働きかけ-応答のようなやり取りの内部での発話の移行に要する時間と,一つのやり取りが終了し次のやり取りが始まるといったやり取り間での発話の移行に要する時間とを比べると,前者のほうが移行時間が有意に短いことがわかった.このことは,新たなやり取りを開始する際の認知負荷の高さを示唆するとともに,その情報を利用して,やり取りの境界を自動的に認識できる可能性を示している.前年度と合わせ,言い直し,話者交替,相づち,やり取り構造といった音声対話の諸特徴に関するさまざまな知見を得ることができ,人間の音声言語コミニュケーションの仕組みに適応した柔軟な音声対話システムを開発するうえでの基礎とすることができた.

在这项研究中，我们利用人类之间的口语对话记录数据来分析诸如犹豫和改写等不流畅现象以及说话者变化和相互互动等对话交互，并对人类语音和语言行为进行建模和研究。今年的研究项目有以下两点： 1．韵律信息参与会津反应基于对前一年会津发生地点的韵律特征的分析，通过人为地修改说话者话语的一些韵律特征，我们可以促进听者的会津反应。实验验证是否可以抑制音调。结果，将停顿前的音调改为升调和降调（对接语调）。这一结果与基于前一年语料库的机器学习的结果一致，并表明升调和降调等韵律特征与会津的产生略有增加有关，这表明它不仅可以用于控制时序，同时也请求听者的反馈。2．交互结构与话语之间的时间长度之间的关系分析使用千叶大学地图任务对话语料库和奈良科学技术大学的自由对话语料库，我们调查了由方法、响应组成的对话交流结构之间的关系，并统计分析补充与话语之间的过渡时间的关系。因此，当将交互（例如动作响应）内的话语转换所需的时间与交互之间的转换话语（例如一个交互结束和下一个交互开始时）所需的时间进行比较时，前者的转换时间更长。这表明开始新的交互时需要很高的认知负荷，也表明使用这些信息自动识别交互的边界的可能性结合前一年，我们能够获得有关特征的各种知识。口语对话，如重述、说话人变化、互换和交互结构，并开发适应人类口语交流机制的灵活口语对话系统，这可以作为开发的基础。