指点字の感情認識システムの開発

手指盲文情感识别系统的开发

• 批准号: 16700430
• 负责人: 松田 康広
• 金额: $ 1.15万
• 依托单位: Kanagawa Institute of Technology
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Young Scientists (B)
• 财政年份: 2004
• 资助国家: 日本
• 起止时间: 2004 至 2006
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/grant/KAKENHI-PROJECT-16700430/
• 关键词: 盲ろう者; 指点字; 感情認識; コミュニケーション支援

1.16年度に実施、17年度に分析を行なった、盲ろう者通訳・介助員の感情を表現に関する実験について、被検者を増やして実施した。被打点者の手を圧力センサ上に置き、計測された荷重変化から、打点荷重と打点時間、休止時間を算出した。分析の結果、「喜び」はリズミカルに打点時間を短く、「悲しみ」は打点時間を長く、打点荷重を弱く、「怒り」は打点荷重を強く打点する、感情表現方法は共通していた。被打点者が装着した加速度センサで、打点によって生じる衝撃加速度を計測し、衝撃加速度の振幅と、打点開始から次の打点開始までの区間長(打点時間と休止時間の和)を算出した。その結果、振幅と区間長による感情の判別分析によって文の感情を判別する手法を導出し、感情認識の可能性が示された。2.16〜17年度開発した打点認識システムを改良した。被打点者が装着した加速度センサで、打点によって生じる衝撃加速度を計測し、打点された指と打点位置を認識する。打点された指の変化から、点字表記の日本語の構文解析を行ない、日本語の文字列に変換し、それを合成音声で出力する。盲ろう者通訳・介助員の打点を認識する評価実験を行なった。平均打点速度37.0文字/minの打点で、打点指の認識率は94.3%、打点位置の認識率は94.9%であった。3.16〜17年度開発した打点教示システムを改良し、指点字習得視覚障害者と健常者のコミュニケーション実験を実施した。1分間あたりのコミュニケーション速度が21.8文字/minと限定されたものの、健常者が指点字習得視覚障害者と、指点字で直接コミュニケーションができた。

2016年，我们对盲人和助手表达表达表达的实验的审查员数量增加了，该实验是在2016财年实施的，并在2017财年进行了分析。将击球手的手放在压力传感器上，皮疹载荷，命中点时间和冬眠时间是根据测得的负载变化计算的。分析的结果是，“ Joy”有节奏的皮疹时间短，“悲伤”时间很长，打点时间较弱，RBI负载较弱，“愤怒”具有强烈的浮点，情感表达方法很普遍。击球手安装的加速度传感器测量了命中点产生的冲击加速度，撞击加速度的振幅以及从RBI开始到下一个RBI开始的截面长度）。结果，通过振幅和截面长度对情绪的歧视分析得出了一种确定句子情绪的方法，表明了情绪识别的可能性。 2.16-17中开发的RBI识别系统已得到改善。刺激器附着的加速度传感器测量了由命中点引起的冲击加速度，并识别手指和坡道位置。从击中的手指的变化中，对盲文表示法进行了日本语法分析，将其转换为日本字符串，并以合成音频输出。我们进行了一项评估实验，以认识盲人聋人和助手的RBI。随着平均RBI速度为37.0个字符/min，皮疹手指的感知率为94.3％，在RBI位置的识别率为94.9％。 RBI教学系统从3.16到2017年开发，并在视觉障碍和健康的人之间进行了沟通实验。尽管每分钟的通信速度限制为21.8个字符/分钟，但健康的人能够用指法直接与指尖的视觉障碍进行沟通。

项目成果

Finger Braille Teaching System for People who Communicate with Deafblind People

与聋盲人交流的手指盲文教学系统

• 发表时间: 2007
• 期刊: Proceedings of IEEE International Conference on Mechatronics and Automation 2007 (掲載予定)
• 作者: Sakamoto M;Harada T;et al.;田平 隆行;田平 隆行;田平 隆行;田平 隆行;田平 隆行;松田康広;松田康広;田崎 洋光;Yasuhiro Matsuda
• 通讯作者: Yasuhiro Matsuda

指点字の打点教示プログラムの開発〜音声認識と点字表記への変換〜

开发手指盲文点字教学程序-语音识别及盲文符号转换-

• 发表时间: 2004
• 期刊: 第2回生活支援工学系学会連合大会講演予稿集
• 作者: Sakamoto M;Harada T;et al.;田平 隆行;田平 隆行;田平 隆行;田平 隆行;田平 隆行;松田康広;松田康広;田崎 洋光;Yasuhiro Matsuda;Yasuhiro Matsuda;松田康広;松田康広;Yasuhiro Matsuda;松田康広;松田康広;松田康広;松田康広;松田康広;Yasuhiro Matsuda;松田康広;松田康広;松田康広
• 通讯作者: 松田康広

指点字通訳者による感情表現の特徴

手指盲文解译员情感表达特征

• 发表时间: 2007
• 期刊: 全国盲ろう者教育研究会会報 4(掲載予定)
• 作者: Sakamoto M;Harada T;et al.;田平 隆行;田平 隆行;田平 隆行;田平 隆行;田平 隆行;松田康広
• 通讯作者: 松田康広

指点字の打点教示システムの開発~音声認識を利用した打点指と打点位置の教示~

开发手指点字点字教学系统～通过语音识别来教学点手指和点位置～

• 发表时间: 2007
• 期刊: ライフサポート 19・3(掲載予定)
• 作者: Sakamoto M;Harada T;et al.;田平 隆行;田平 隆行;田平 隆行;田平 隆行;田平 隆行;松田康広;松田康広
• 通讯作者: 松田康広

盲ろう者用音声認識-点字出力システム(音声ブリスタ)の開発

为聋盲人开发语音识别-盲文输出系统（语音泡罩）

• 发表时间: 2005
• 期刊: 第20回リハ工学カンファレンス講演論文集
• 作者: Sakamoto M;Harada T;et al.;田平 隆行;田平 隆行;田平 隆行;田平 隆行;田平 隆行;松田康広;松田康広;田崎 洋光;Yasuhiro Matsuda;Yasuhiro Matsuda;松田康広;松田康広;Yasuhiro Matsuda;松田康広;松田康広;松田康広;松田康広;松田康広
• 通讯作者: 松田康広