User-adaptive spoken dialogue system based on communication accommodation theory

基于通信适应理论的用户自适应口语对话系统

基本信息

批准号：
22K17958
负责人：
河野誠也
金额：
$ 2.91万
依托单位：
Institute of Physical and Chemical Research
依托单位国家：
日本
项目类别：
Grant-in-Aid for Early-Career Scientists
财政年份：
2022
资助国家：
日本
起止时间：
2022-04-01 至 2025-03-31
项目状态：
未结题

项目摘要

本研究では、人間の生活空間に根差す対話ロボットが人間と共生していくために必要なコミュニケーション調整機能をきめ細やかなレベルから統合的に理解・モデル化し、様々なユーザに対して適応的にコミュニケーション調整を行うことが可能な対話ロボットを構築するための基盤を確立することを目的とする。2022年度は、特に対話における話者間の発話の収束・拡散によるコミュニケーション調整を言語的側面から捕捉するための自動評価指標を単語分散表現の類似度に着目して開発した。開発した自動評価指標を用いた対話分析により、対話における収束・拡散が特定の対話要素（対話者の社会属性や関係性、対話の状況など）に影響されて発生する可能性が示唆された。次に、開発した自動評価指標を用いて対話システムの応答生成候補を発話の収束・発散の観点を考慮して再順付けする手法を開発した。これらの成果を統合した音声対話システムは、人工知能学会SLUD研究会主催の対話システムライブコンペティション5で3位に入賞した。また、次年度以降の研究に利用する言語資源として、円滑なコミュニケーション調整、特に言語的配慮がタスク達成の鍵となる説得対話と言い換えに着目したコーパスを整備した。具体的には、生活習慣改善、寄付行動、ネット依存改善をユーザに促すことを目的としたロボットと人間の対話をWoZ法を用いて収集し、マルチモーダルコーパスとして整備した。また、言い換えについては、ネガティブな事柄をポジティブな事柄に言い換えるようなリフレーミングに基づいた言い換え事例をWeb上から収集し、パラレルコーパスとして整備した。

在这项研究中，我们将全面理解和建模植根于人类生活空间的会话机器人与人类共存所需的通信协调功能，并使其适应各种用户。为构建能够协调通信的对话机器人奠定基础。 2022财年，我们开发了一个自动评估指标，重点关注单词分散表达的相似性，从语言角度捕捉对话中说话者之间话语趋同和发散所引起的沟通调整。使用开发的自动评估指标进行对话分析表明，对话的收敛和发散可能受到特定对话元素（对话者的社会属性和关系、对话情境等）的影响。接下来，我们开发了一种方法，使用开发的自动评估指标，考虑话语的收敛和发散，对对话系统的响应生成候选进行重新排序。整合这些成果的语音对话系统在日本人工智能学会SLUD研究组主办的第五届对话系统现场竞赛中获得了第三名。此外，作为明年起用于研究的语言资源，我们准备了一个语料库，重点关注顺畅的沟通协调，特别是说服性对话和释义，其中语言考虑是完成任务的关键。具体来说，我们使用WoZ方法收集机器人与人类之间的对话，旨在鼓励用户改善生活习惯、捐款、改善网络成瘾，并创建多模态语料库。关于释义，我们从网络上收集了基于重构的释义示例，将消极的事物改写为积极的事物，并将其编译成平行语料库。

项目成果

期刊论文数量（30）

专著数量（0）

科研奖励数量（0）

会议论文数量（0）

专利数量（0）

What Should the System Do Next?: Operative Action Captioning for Estimating System Actions

DOI：
10.48550/arxiv.2210.02735
发表时间：
2022-10
期刊：
ArXiv
影响因子：
0
作者：
Taiki Nakamura;Seiya Kawano;Akishige Yuguchi;Yasutomo Kawanishi;Koichiro Yoshino
通讯作者：
Taiki Nakamura;Seiya Kawano;Akishige Yuguchi;Yasutomo Kawanishi;Koichiro Yoshino

意図伝達を目的とするアンドロイドロボットの表情生成

为 Android 机器人生成面部表情以传达意图