Understanding social interactions through first-person view lifelogging

通过第一人称视角生活记录了解社交互动

基本信息

批准号：
22H03634
负责人：
角康之
金额：
$ 10.73万
依托单位：
Future University-Hakodate
依托单位国家：
日本
项目类别：
Grant-in-Aid for Scientific Research (B)
财政年份：
2022
资助国家：
日本
起止时间：
2022-04-01 至 2025-03-31
项目状态：
未结题

来源：
https://kaken.nii.ac.jp/en/grant/KAKENHI-PROJECT-22H03634/
关键词：
社会的インタラクションライフログ顔数計行動変容

项目摘要

本研究課題の目的は、ライフログによって心身の質の向上を実現する技術の開発と、それに関わる人の心身メカニズムを解明することである。我々はこれまでに、歩数計のアナロジーで「顔数計」と呼ばれるシステムを提案してきた。このシステムは、胸につけたカメラに映りこむ他者の顔の数を数えることで装着者の社会活動の量や質を測るものである。しかしその予備検討のための試作システムは、通常のアクションカメラを利用して蓄積された一定時間（せいぜい1時間程度）の映像データを用いてバッチ処理的に顔数計算を行い、その結果をグラフ可視化するものであった。本研究課題の目的の一つは、このシステムを腕時計や眼鏡のように日常的に装着し、デバイス装着者本人が普段から自分の社会活動量を振り返ることができるようにし、そのことが当人や周辺の行動にどう影響を与えるかを見出すことである。本研究課題の初年度にあたる2022年度は、このシステムを日常的に簡易装着可能なデバイスでシステム試作を進めた。具体的にはM5Stack社によるマイコンデバイスで簡易的な顔数計の試作検討をした。一方、周辺研究として、胸に付けた魚眼カメラでとらえた装着者本人の頭部方向や指さし方向を画像認識することで、ライフログ映像から当人の注目対象をつきとめるシステムの試作や、視線計測デバイスの援用によって、社会的インタラクション時の身体のひねり、すなわち、胴体方向、頭部方向、眼球視線方向の3方向のねじれから社会的活動の状況を理解する手法の開発を進めた。また、発話ライフログから発話量や発話単語の推移を分析し、状況推定や個人差を議論する研究も進めた。

该研究项目的目的是开发一种通过生活记录来提高身心质量的技术，并阐明相关人员的身心机制。到目前为止，我们已经提出了一种称为“面部计数器”的系统，类似于计步器。该系统通过计算佩戴在胸前的摄像头中反映的其他人的面部数量来测量佩戴者社交活动的数量和质量。然而，本次初步研究的原型系统使用普通运动相机在一定时间段（最多大约1小时）内积累的视频数据来计算批量处理中的人脸数量，并将结果绘制成图表。可视化。该研究项目的目的之一是让设备佩戴者能够通过佩戴该系统（例如手表或眼镜）来回顾自己的社交活动，目标是找出如何影响其行为。人们和他们周围的人。 2022 年，即该研究项目的第一年，我们使用可以轻松日常佩戴的设备继续进行该系统的原型生产。具体来说，我们使用 M5Stack 制造的微型计算机设备研究了一个简单的人脸计数设备原型。另一方面，作为相关研究的一部分，我们正在开发一种原型系统，该系统通过识别佩戴者的头部方向和由安装在胸部的鱼眼相机捕获的指向方向，从生活日志视频中识别佩戴者的注意力目标，以及借助测量设备，我们开发了一种从社交过程中身体的扭转来了解社交活动情况的方法，即三个方向的扭转：躯干方向、头部方向。，以及眼睛注视方向。我们还进行了研究，分析言语生活日志中的言语量和说出的单词的变化，并估计情况并讨论个体差异。