User-adaptive spoken dialogue system based on communication accommodation theory

基于通信适应理论的用户自适应口语对话系统

基本信息

批准号：
22K17958
负责人：
河野誠也
金额：
$ 2.91万
依托单位：
Institute of Physical and Chemical Research
依托单位国家：
日本
项目类别：
Grant-in-Aid for Early-Career Scientists
财政年份：
2022
资助国家：
日本
起止时间：
2022-04-01 至 2025-03-31
项目状态：
未结题

项目摘要

本研究では、人間の生活空間に根差す対話ロボットが人間と共生していくために必要なコミュニケーション調整機能をきめ細やかなレベルから統合的に理解・モデル化し、様々なユーザに対して適応的にコミュニケーション調整を行うことが可能な対話ロボットを構築するための基盤を確立することを目的とする。2022年度は、特に対話における話者間の発話の収束・拡散によるコミュニケーション調整を言語的側面から捕捉するための自動評価指標を単語分散表現の類似度に着目して開発した。開発した自動評価指標を用いた対話分析により、対話における収束・拡散が特定の対話要素（対話者の社会属性や関係性、対話の状況など）に影響されて発生する可能性が示唆された。次に、開発した自動評価指標を用いて対話システムの応答生成候補を発話の収束・発散の観点を考慮して再順付けする手法を開発した。これらの成果を統合した音声対話システムは、人工知能学会SLUD研究会主催の対話システムライブコンペティション5で3位に入賞した。また、次年度以降の研究に利用する言語資源として、円滑なコミュニケーション調整、特に言語的配慮がタスク達成の鍵となる説得対話と言い換えに着目したコーパスを整備した。具体的には、生活習慣改善、寄付行動、ネット依存改善をユーザに促すことを目的としたロボットと人間の対話をWoZ法を用いて収集し、マルチモーダルコーパスとして整備した。また、言い換えについては、ネガティブな事柄をポジティブな事柄に言い換えるようなリフレーミングに基づいた言い換え事例をWeb上から収集し、パラレルコーパスとして整備した。

这项研究旨在为建立对话机器人建立基础，该机器人可以通过将沟通调整功能从详细的水平整合到与人类共存，并为建立对话机器人建立可以适应与各种用户的对话机器人建立基础，从而适应植根于人类生活空间的通信机器人。在2022年，我们开发了一个自动化评估指数，该指数通过对话中说话者之间的语音融合和语音传播来捕获沟通调整，尤其是专注于单词差异表达式的相似性。使用自动评估指标的对话分析表明，由于特定对话元素的影响（例如对话者的社会属性和关系，对话的情况等），可能会发生对话的融合和扩散。接下来，我们开发了一种方法，其中考虑了使用开发的自动评估指标的语音收敛性和语音差异，以重新排序对话系统中的响应生成候选者。集成这些结果的语音对话系统在人工智能协会的SLUD研究小组举办的第五对话系统现场比赛中获得了第三名。此外，我们开发了一个专注于有说服力的对话的语料库，这是完成任务的关键，作为在明年及以后进行研究的语言资源。具体而言，使用WOZ方法收集了机器人人类对话，目的是鼓励用户改善生活方式习惯，捐赠行为和互联网成瘾，并作为多模式语料库开发。此外，基于重新标记的示例，即从网络中收集了负面事物，并作为平行语料库开发。

项目成果

期刊论文数量（30）

专著数量（0）

科研奖励数量（0）

会议论文数量（0）

专利数量（0）

What Should the System Do Next?: Operative Action Captioning for Estimating System Actions

DOI：
10.48550/arxiv.2210.02735
发表时间：
2022-10
期刊：
ArXiv
影响因子：
0
作者：
Taiki Nakamura;Seiya Kawano;Akishige Yuguchi;Yasutomo Kawanishi;Koichiro Yoshino
通讯作者：
Taiki Nakamura;Seiya Kawano;Akishige Yuguchi;Yasutomo Kawanishi;Koichiro Yoshino

意図伝達を目的とするアンドロイドロボットの表情生成

为 Android 机器人生成面部表情以传达意图