仮想空間のチームスポーツを介したコミュニケーションスキルの知的学習支援

通过虚拟空间中的团队运动来智能学习支持沟通技巧

基本信息

批准号：
15F15049
负责人：
河原達也
金额：
$ 1.47万
依托单位：
Kyoto University
依托单位国家：
日本
项目类别：
Grant-in-Aid for JSPS Fellows
财政年份：
2015
资助国家：
日本
起止时间：
2015-04-24 至 2017-03-31
项目状态：
已结题

项目摘要

人間と自然なコミュニケーションが行えるような人工的なエージェント・ロボットの実現は、人工知能の分野において重要な課題の１つである。本研究では、仮想空間におけるチームスポーツなどの社会的な状況を設定して、言語・非言語コミュニケーションの分析・モデル化を行った上で、実際に仮想空間のエージェントや人間酷似型アンドロイドにおいてその機能を実装した。まず、チームスポーツにおいてリアルなコミュニケーションができるチームメートとしてのエージェントの実現に取り組んだ。大画面上に構築した複数エージェントとバスケットボールを行う環境において、Wizard-of-Oz方式を用いて、音声とジェスチャのやりとりを収録した。特にパスを行う際には、音声とジェスチャの両方が使われる可能性があるが、言語表現だけでなく韻律的なパターンにも着目して分析を行った。その結果、ゲームを通じてコミュニケーションが確立されるにつれて、振る舞いに変化が見られた。特に、ゲームの進行に応じて、単純な発話から複雑な発話が用いられるようになるとともに、励ましなどのタスク以外の発話の割合も増える傾向があることが明らかになった。また、音声とジェスチャを用いた共同行為のパターンも確認した。次に、受付・ガイドや傾聴（話し相手）などの社会的な役割を想定した上で、言語及び非言語によるコミュニケーションが行える自律型アンドロイドの実現に取り組んだ。受付・ガイドにおいては、複数の人が到来することを想定し、どのように視線配布を行い、対話を開始するのか検討を行った。

实现能够与人类自然交流的人工智能体/机器人是人工智能领域的重要挑战之一。在这项研究中，我们在虚拟空间中设置了一个团队运动等社交场景，对言语和非言语交流进行了分析和建模，然后测试了虚拟空间中代理的功能，并实现了一个与人类非常相似的机器人。。首先，我们致力于创建一个可以充当队友的代理，以便在团队运动中进行真正的沟通。使用绿野仙踪方法，我们在大屏幕上构建的环境中记录了语音和手势交互，其中多个智能体在其中打篮球。特别是，在传递时，有可能同时使用言语和手势，但分析不仅关注语言表达，还关注韵律模式。结果显示，随着通过游戏建立沟通，行为发生了变化。特别是，随着游戏的进行，从简单到复杂的话语的使用增加，并且鼓励等非任务话语的比例趋于增加。我们还确认了使用语音和手势的协作行为模式。接下来，我们致力于创建一个能够进行语言和非语言交流的自主机器人，承担接待员、导游和倾听伙伴等社会角色。在接待处/导游处，我们假设会有多人到达，并考虑如何分配视线并发起对话。

项目成果

期刊论文数量（0）

专著数量（0）

科研奖励数量（0）

会议论文数量（0）

专利数量（0）

An imitation-based approach to represent common ground in a virtual basketball agent team mate

一种基于模仿的方法来代表虚拟篮球代理队友的共同点

DOI：
发表时间：
2015
期刊：
影响因子：
0
作者：
D.Lala;P.Milhorat;K.Inoue;T.Zhao;and T.Kawahara;D.Lala and T.Kawahara;D. Lala and A. Nakazawa;D. Lala and T. Nishida
通讯作者：
D. Lala and T. Nishida

Utterance behavior of users while playing basketball with a virtual teammate

用户与虚拟队友打篮球时的言语行为

DOI：
发表时间：
2017
期刊：
影响因子：
0
作者：
D.Lala;Y.Li;and T.Kawahara
通讯作者：
and T.Kawahara

A data-driven passing interaction model for embodied basketball agents

数据驱动的篮球代理传球交互模型

DOI：
10.1007/s10844-015-0386-z
发表时间：
2015
期刊：
Journal of Intelligent Information Systems
影响因子：
3.4
作者：
Divesh Lala and Toyoaki Nishida
通讯作者：
Divesh Lala and Toyoaki Nishida

Multimodal interaction with the autonomous android ERICA

与自主机器人 ERICA 的多模式交互

DOI：
发表时间：
2016
期刊：
影响因子：
0
作者：
D.Lala;P.Milhorat;K.Inoue;T.Zhao;and T.Kawahara
通讯作者：
and T.Kawahara

Heat map visualization of multi-slice medical images through correspondence matching of video frames

通过视频帧的对应匹配实现多切片医学图像的热图可视化

DOI：
10.1145/2857491.2857504
发表时间：
2016
期刊：
Proc. of the Ninth Biennial ACM Symposium on Eye Tracking Research & Applications (ETRA)
影响因子：
0
作者：
池下裕紀;篠崎隆宏;Divesh Lala and Atsushi Nakazawa
通讯作者：
Divesh Lala and Atsushi Nakazawa