モバイル端末を用いた街灯照度センシングによる夜間道の安全性判定とその実用化

移动终端路灯照度传感判断夜间道路安全及其实际应用

基本信息

批准号：
16J09670
负责人：
松田裕貴
金额：
$ 1.79万
依托单位：
Nara Institute of Science and Technology
依托单位国家：
日本
项目类别：
Grant-in-Aid for JSPS Fellows
财政年份：
2016
资助国家：
日本
起止时间：
2016-04-22 至 2019-03-31
项目状态：
已结题

项目摘要

平成３０年度は，下記研究課題について実施した．ウェアラブルセンシングと音声・動画解析を組み合わせた観光客のマルチモーダル心理状態推定手法の検討 -- 従来の参加型センシングで取り組まれてきたセンサによる直接的な環境センシングでは測定できない環境情報（例えば，ある場所で人が抱く「感情」や「雰囲気」）を収集するため，ウェアラブルデバイスやスマートフォンカメラを用いることにより都市に存在する人々の様子を観察することによる間接的な環境情報の観測手法を検討した．具体的なセンシングタスクとして，観光客が観光中に抱く感情や満足感といった「心理状態」の推定に取り組んだ．観光中に観光客が無意識的に行う仕草（視線，頭部，身体の動きなど）や表情・声色を継続的に収集するシステムを構築し，得られたデータから抽出された特徴と被験者アンケートに基づく正解ラベルを用い心理状態推定モデルを構築した．ドイツ・日本の２カ国で合計２２名の被験者を募って実施した実証実験により，感情推定（３クラス分類タスク）に関しては約５０％のUAR（Unweighted Average Recall），満足度推定（７段階回帰タスク）に関しては約1.1のMAE（Mean Absolute Error）で推定可能であることが示された．また，被験者の属性（国籍や文化圏、使用言語）ごとの詳細な分析を通じて，属性による仕草の表出の仕方には違いが存在し，心理状態推定への寄与の度合いに差が生じることを明らかにした．

2018年度，我们进行了以下研究课题的研究。研究结合可穿戴传感和音频/视频分析来估计游客多模态心理状态的方法——传统的参与式传感已经解决了无法通过传感器直接环境传感测量的环境信息（例如，为了为了收集人们在城市地区的“情绪”和“气氛”，我们考虑了一种通过使用可穿戴设备和智能手机摄像头观察城市中的人来观察环境信息的间接方法。作为一项具体的感知任务，我们致力于估计游客的“心理状态”，例如他们在观光时的感受和满意度。我们建立了一个系统，根据从获得的数据和主题问卷中提取的特征，持续收集游客在观光时做出的无意识手势（目光、头部、身体动作等）、面部表情和语气。在此基础上使用正确的标签构建了心理状态估计模型。在德国和日本对总共 22 名受试者进行的演示实验表明，对于情绪估计（3 级分类任务）和满意度估计（7 步回归任务），UAR（未加权平均召回率）约为 50%。显示可以用大约 1.1 的 MAE（平均绝对误差）进行估计。此外，通过对每个被试的属性（国籍、文化区域、使用的语言）进行详细分析，我们发现，根据属性的不同，手势的表达方式存在差异，对心理的贡献程度也存在差异。状态估计被揭晓。