A study on a device for the hearing impaired to understand surrounding conditions and provide instructions from a instructor during skiing classes

针对听力障碍者了解周围情况并在滑雪课程期间提供教练指导的设备的研究

基本信息

批准号：
20K03091
负责人：
黒木速人
金额：
$ 2.75万
依托单位：
Tsukuba University of Technology
依托单位国家：
日本
项目类别：
Grant-in-Aid for Scientific Research (C)
财政年份：
2020
资助国家：
日本
起止时间：
2020-04-01 至 2024-03-31
项目状态：
已结题

项目摘要

本研究は，聴覚障害者がスキー講習受講時に周辺情報や指導情報を提示するための装置開発ならびに最適情報提示方法に関する研究である．今年度は，研究の主題であるスキー講習時における指導情報提示に関して研究を進めた．具体的には，指導者からの音声情報を音声認識APIにて文字変換しスマートグラス（ARメガネ）に提示する装置を試作し，実際のスキー講習に適用させる実証実験を実施した．システムを構築したのち，システムの基本性能を把握するために，音声入力から字幕提示までの遅れ時間の測定，ワイヤレスマイク伝送距離の確認を行った．その結果，入力される文の形態素数に比例し入力から提示される時間は遅れ，概ね，5形態素あたり2秒の遅れとなることがわかった．また，伝送距離は190mであった．システム実証実験として，プロのスキー指導員と聴覚障害受講生と健聴受講生各1名にて実証実験をスキースクールの2時間のプライベートレッスンとして行った．その結果，携帯サービスエリアに起因するであろう通信不良があったものの，概ね良好の結果であった．聴覚障害受講生にとって，スキー技術の向上はもちろん，健聴スキー指導員とのリフト上でのコミュニケーションができたことが，何にも増してシステムの有効性を示したと言える．

这项研究是关于设备开发和最佳信息呈现方法的研究，用于听力受损的人在参加滑雪课程时提供周围的信息和指导信息。今年，我们在滑雪课程期间对教学信息的介绍进行了研究，这是我们研究的主题。具体来说，我们进行了一种原型设备，该设备可以使用语音识别API从讲师中转换语音信息，并将其显示在智能眼镜（AR眼镜）上，并将其用于实际的滑雪训练。构建系统后，为了了解系统的基本性能，我们测量了从音频输入到字幕表示的延迟时间，并检查了无线麦克风传输距离。结果，发现从输入中提出的时间与输入句子的词素数成正比，并且从输入中提出的时间通常延迟每五个词素2秒。传输距离为190m。作为系统演示实验，一位专业的滑雪教练，一名听力障碍学生和一名健康的听力学生在滑雪学校举行了一次示范实验，作为两小时的私人课程。结果，尽管有移动服务区域可能引起的沟通缺陷，但结果通常很好。对于听力受损的学生来说，他们能够在升降机期间与健康听力的滑雪教练进行交流，这一事实不仅提高了滑雪技巧，而且还显示了系统的有效性。