High Recallable Gesture Sets and Detection System for Establishing Gaze-based Manipulation

用于建立基于注视的操作的高可召回手势集和检测系统

• 批准号: 21J10301
• 负责人: 礒本 俊弥
• 金额: $ 0.96万
• 依托单位: University of Tsukuba
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for JSPS Fellows
• 财政年份: 2021
• 资助国家: 日本
• 起止时间: 2021-04-28 至 2023-03-31
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/en/grant/KAKENHI-PROJECT-21J10301/
• 关键词: ユーザビリティ; 視線入力; ユーザインタフェース; インタラクション; 認知

本研究では，想起性に優れたジェスチャセットの決定とその認識システムの構築を行う．ジェスチャとは，マウス操作でのクリックやホイールに該当し、そのジェスチャに紐付いた操作が行われる．ジェスチャセットの1つとして，眼を留めることをジェスチャとした操作に関して，研究を行った．この眼を留めるジェスチャは，視線に基づく操作において凝視を用いた操作と呼ばれている．これは，マウスでの操作におけるクリック操作に該当する．凝視を用いた操作では，例えば，ある対象を400ms以上見続けた時に，その対象への操作を行うことができる．この例では400msとしているが，視線に基づく操作に関する研究分野全体として，適切な値（時間）は決まっておらず，値によってはユーザに対して不快感を与えること，操作の難しさに影響を与えることがわかっている．そこで，本研究ではどれくらいの値が，ユーザにとって使用しやすい値なのか・操作を想起しやすい値なのかの調査を行った．調査には，視覚情報を人間がどのように処理し行動に繋げるかを表すモデルであるModel Human Processor (以降MHP) を用いた．MHPを通じて，人間がどの程度の時間を知覚に要するかを推測し，凝視を用いた操作に推測した時間を適応することで，想起性の高い操作手法の実現を試みた．まず，MHPから推測した「見続ける時間」は600msであることを示し，見続ける時間を600msとした凝視を用いた操作の認識システムを実装した．そして，このシステムを用いてユーザ実験を行った．その結果，600msを見続ける時間として用いることが適しているということがわかった．本研究成果をまとめたものを，国際会議SAP 2021にて査読付き口頭発表を行った．

在本研究中，我们将确定一个具有良好召回率的手势集，并为其构建一个识别系统。手势对应于鼠标单击或滚轮，并且执行与该手势相关联的操作。作为手势集之一，我们对使用注视作为手势的操作进行了研究。这种注视姿势在视线操作中称为基于凝视的操作。这相当于使用鼠标时的点击操作。例如，在使用凝视的操作中，如果您持续注视某个物体超过 400ms，则可以对该物体进行操作。在本示例中，该值为400ms，但总体而言，在与基于注视的操作相关的研究领域中，尚未确定适当的值（时间），并且根据该值，可能会给用户带来不适或影响操作难度我就知道了。因此，在本研究中，我们调查了哪些值易于用户使用以及哪些值易于记忆操作。在调查中，我们使用了模型人类处理器（以下简称 MHP），它是一个代表人类如何处理视觉信息并将其与行为联系起来的模型。通过MHP，我们估计了人类感知所需的时间，并将估计的时间应用于凝视操作，我们试图创建一种具有高召回率的操作方法。首先，我们表明MHP估计的“继续观看时间”为600ms，并实现了使用凝视进行操作的识别系统，继续观看的时间为600ms。然后我们使用该系统进行了用户实验。结果我们发现用600ms作为连续观看的时长比较合适。 SAP 2021 国际会议上对这项研究结果进行了同行评审的口头报告。

项目成果

Relationship between Dwell-Time and Model Human Processor for Dwell-based Image Selection

基于停留的图像选择的停留时间与模型人类处理器之间的关系

• 发表时间: 2021
• 作者: Toshiya Isomoto; Shota Yamanaka; Buntarou Shizuki
• 通讯作者: Buntarou Shizuki

Relationship between Dwell-Time and Model Human Processor for Dwell-based Image Selection

基于停留的图像选择的停留时间与模型人类处理器之间的关系

• DOI: 10.1145/3474451.3476240
• 发表时间: 2021-09-16
• 期刊: ACM Symposium on Applied Perception 2021
• 作者: Toshiya Isomoto;Shota Yamanaka;B. Shizuki
• 通讯作者: B. Shizuki