口形を併用する音声認識と文理解
利用口型进行语音识别和句子理解
基本信息
- 批准号:63608505
- 负责人:
- 金额:$ 0.83万
- 依托单位:
- 依托单位国家:日本
- 项目类别:Grant-in-Aid for Scientific Research on Priority Areas
- 财政年份:1987
- 资助国家:日本
- 起止时间:1987 至 1988
- 项目状态:已结题
- 来源:
- 关键词:
项目摘要
本研究は口形を音声認識の一つの有効な情報として用いることにより、音声認識の性能向上を図ろうとするものである。そのため、本年度は以下の各項目について研究を行った。1.ニューロネットワークによる口形併用音声認識母音を発声したときの口形画像および音声特徴を共に同一ニューロネットに入力し、五つの母音の認識実験を行った。特に不特定話者の音声に対して、音声情報のみによる場合の51%の認識率を口形と音声情報を組み合わせることにより79%に向上できた。2.エネルギー関数による口形輪郭の抽出口形輪郭は抽出しにくいことが多い。これは、不十分な輪郭情報しか画像内に存在しないことによる。このようなとき、先験的知識をエネルギー関数の形で表現し、不十分な輪郭情報から輪郭復元を行う正則化プロセスについて考案した。これにより、口紅等をつけない自然な状態のもとで、口形輪郭の抽出が可能となった。また、口唇運動の画像計測の可能性が確かめられた。高雑音下における口形併用音声認識の能力実用化の可能性を探るために、モーターの回転音など高騒音下における口形併用音声認識の能力について研究を行った。この場合、処理の高速化のため口形情報は45度前方からのX-Yトラッカーにより得た。雑音の影響により音声情報のみによる認識の正解率はかなりばらついている。特に、発音が近い単語の認識は強い雑音に乱され、認識がほとんどできない状態になっている。そのような状況において、口唇の画像情報を加味すると認識率の向上がはっきり見られた。
这项研究旨在通过使用口腔形状作为语音识别的有效信息之一来提高语音识别的性能。因此,今年我们对以下项目进行了研究:1。嘴巴形状元音的嘴巴形状图像和声音特征都输入了同一神经元,并进行了五个元音识别实验。特别是,对于未指定的扬声器的声音,仅使用口腔形状和语音信息将仅使用语音信息的识别率提高到79%。 2。使用能量函数提取口腔形状轮廓。提取口腔形状轮廓通常很难。这是因为图像中存在轮廓信息不足。在这种情况下,设计了一个正则化过程,以表达能量函数形式的先验知识,并从不足的轮廓信息中恢复轮廓。这使得在仍然保持自然状态的情况下没有口红或类似状态时,可以提取口腔轮廓。此外,确认了唇部运动图像测量的可能性。为了探索在高噪声下使用口腔形状结合使用语音识别的可能性,我们对使用高噪声下的口腔形状组合(例如运动旋转声音)进行了研究的研究。在这种情况下,使用来自45度的X-Y跟踪器获得了口形信息,以加快处理。由于噪声的影响,仅使用语音信息识别的正确答案率很大。特别是,对具有近亲发音的单词的识别会被强烈的噪音破坏,这几乎无法识别它们。在这种情况下,考虑嘴唇的图像信息时,识别率明显提高。
项目成果
期刊论文数量(30)
专著数量(0)
科研奖励数量(0)
会议论文数量(0)
专利数量(0)
数据更新时间:{{ journalArticles.updateTime }}
{{
item.title }}
{{ item.translation_title }}
- DOI:
{{ item.doi }} - 发表时间:
{{ item.publish_year }} - 期刊:
- 影响因子:{{ item.factor }}
- 作者:
{{ item.authors }} - 通讯作者:
{{ item.author }}
数据更新时间:{{ journalArticles.updateTime }}
{{ item.title }}
- 作者:
{{ item.author }}
数据更新时间:{{ monograph.updateTime }}
{{ item.title }}
- 作者:
{{ item.author }}
数据更新时间:{{ sciAawards.updateTime }}
{{ item.title }}
- 作者:
{{ item.author }}
数据更新时间:{{ conferencePapers.updateTime }}
{{ item.title }}
- 作者:
{{ item.author }}
数据更新时间:{{ patent.updateTime }}
田村 進一其他文献
田村 進一的其他文献
{{
item.title }}
{{ item.translation_title }}
- DOI:
{{ item.doi }} - 发表时间:
{{ item.publish_year }} - 期刊:
- 影响因子:{{ item.factor }}
- 作者:
{{ item.authors }} - 通讯作者:
{{ item.author }}
{{ truncateString('田村 進一', 18)}}的其他基金
人工生命集団における遊び心と多様な個性の発現
人工生命群体的俏皮性和多样化个性的表达
- 批准号:
12878060 - 财政年份:2000
- 资助金额:
$ 0.83万 - 项目类别:
Grant-in-Aid for Exploratory Research
方向スケール空間フィルタリング法とその応用
定向尺度空间滤波方法及其应用
- 批准号:
99F00078 - 财政年份:1999
- 资助金额:
$ 0.83万 - 项目类别:
Grant-in-Aid for JSPS Fellows
MRIにおける体動アーチファクト除去ソフトの臨床応用システムの構築
MRI体动伪影去除软件临床应用系统的构建
- 批准号:
98F00221 - 财政年份:1998
- 资助金额:
$ 0.83万 - 项目类别:
Grant-in-Aid for JSPS Fellows
MRIにおける体動アーチファクト除去システム
MRI 中的身体运动伪影去除系统
- 批准号:
07558254 - 财政年份:1995
- 资助金额:
$ 0.83万 - 项目类别:
Grant-in-Aid for Scientific Research (B)
時空間フィルタによる微小血管中の白血球追跡
使用时空滤波器追踪微血管中的白细胞
- 批准号:
07680942 - 财政年份:1995
- 资助金额:
$ 0.83万 - 项目类别:
Grant-in-Aid for Scientific Research (C)
コネクショニスト・アプロ-チによる空間的推論・連想と物体理解
使用联结主义方法进行空间推理/关联和对象理解
- 批准号:
01633518 - 财政年份:1989
- 资助金额:
$ 0.83万 - 项目类别:
Grant-in-Aid for Scientific Research on Priority Areas
コネクショニスト・アプローチによる空間的推論連想と物体理解
使用联结主义方法进行空间推理关联和对象理解
- 批准号:
63633516 - 财政年份:1988
- 资助金额:
$ 0.83万 - 项目类别:
Grant-in-Aid for Scientific Research on Priority Areas
口話を併用する音声認識
使用口语进行语音识别
- 批准号:
62608505 - 财政年份:1987
- 资助金额:
$ 0.83万 - 项目类别:
Grant-in-Aid for Scientific Research on Priority Areas
推論手法の統合化と多元知識情報の取り扱いに関する研究
推理方法集成与多维知识信息处理研究
- 批准号:
60210017 - 财政年份:1985
- 资助金额:
$ 0.83万 - 项目类别:
Grant-in-Aid for Special Project Research
推論手法の統合化と多元知識情報の取り扱いに関する研究
推理方法集成与多维知识信息处理研究
- 批准号:
59218014 - 财政年份:1984
- 资助金额:
$ 0.83万 - 项目类别:
Grant-in-Aid for Special Project Research
相似国自然基金
砍击案件创口形成、砍击行为及逆向研判系统的生物力学实验与仿真研究
- 批准号:12372323
- 批准年份:2023
- 资助金额:53.00 万元
- 项目类别:面上项目
束口形滑坡支撑拱形成与失效机理及其稳定性研究
- 批准号:
- 批准年份:2022
- 资助金额:30 万元
- 项目类别:青年科学基金项目
束口形滑坡支撑拱形成与失效机理及其稳定性研究
- 批准号:42207216
- 批准年份:2022
- 资助金额:30 万元
- 项目类别:青年科学基金项目
基于微结构特征与断口形貌分析探究中锰钢氢致延迟开裂规律及机理
- 批准号:
- 批准年份:2021
- 资助金额:30 万元
- 项目类别:青年科学基金项目
基于微结构特征与断口形貌分析探究中锰钢氢致延迟开裂规律及机理
- 批准号:52101073
- 批准年份:2021
- 资助金额:24.00 万元
- 项目类别:青年科学基金项目
相似海外基金
CTGFに着目した口腔上皮異形成阻害薬の開発
以CTGF为中心的口腔上皮不典型增生抑制剂的开发
- 批准号:
24K13096 - 财政年份:2024
- 资助金额:
$ 0.83万 - 项目类别:
Grant-in-Aid for Scientific Research (C)
光による気孔開口の駆動力を形成する細胞膜H+-ATPaseの活性制御機構の解明
阐明细胞膜H+-ATP酶的活性控制机制,该酶形成光诱导气孔开放的驱动力
- 批准号:
24KJ1748 - 财政年份:2024
- 资助金额:
$ 0.83万 - 项目类别:
Grant-in-Aid for JSPS Fellows
口腔顔面痛に対するBH4代謝経路活性と新規治療法の基盤形成
BH4代谢途径对口面部疼痛的活性及新治疗方法的形成基础
- 批准号:
23K24539 - 财政年份:2024
- 资助金额:
$ 0.83万 - 项目类别:
Grant-in-Aid for Scientific Research (B)
集水域の地質・地下水涵養特性がもたらす大都市河川の水質差と河口域の赤潮形成の検証
流域地质及地下水补给特征带来的大城市河流水质差异及河口赤潮形成验证
- 批准号:
23K25421 - 财政年份:2024
- 资助金额:
$ 0.83万 - 项目类别:
Grant-in-Aid for Scientific Research (B)
大腸癌形成促進性の口腔細菌による大腸定着メカニズムの解明
阐明口腔细菌促进结肠癌形成的结肠定植机制
- 批准号:
24K18944 - 财政年份:2024
- 资助金额:
$ 0.83万 - 项目类别:
Grant-in-Aid for Early-Career Scientists