Development of Immersive VR Examination System for English 4-skill Testing

沉浸式VR英语四项技能考试系统开发

基本信息

批准号：
22H01046
负责人：
冬野美晴
金额：
$ 10.73万
依托单位：
Kyushu University
依托单位国家：
日本
项目类别：
Grant-in-Aid for Scientific Research (B)
财政年份：
2022
资助国家：
日本
起止时间：
2022-04-01 至 2027-03-31
项目状态：
未结题

项目摘要

産学官でグローバル人材の育成に取り組む中、入学試験など様々な場面において英語４技能評価試験は非常に重要となっている。しかしグローバル標準化試験では、日本人のスピーキング力が多く分布するレベルを細かく分別できないといった問題があり、ローカルテストの開発が行われてきた。本研究プロジェクトは、日本人が英語４技能評価試験を受ける際、とくにスピーキング評価の大きな課題であった不安感やコストの高さについて、これらの問題を解決し、遠隔対応も可能なプラットフォームとして、没入体感型バーチャル・リアリティ（VR）英語コミュニケーション能力評価システムを開発し、従来型試験と比較し効果や運用性を測ることである。2022年度の計画で挙げた基礎分析として、検証実験で用いる具体的なシーンを想定し、テストの模擬問題を設定すること、パイロット分析用の模擬面接シーンの360度動画撮影、検証実験で用いる生体センサの事例調査、ジェスチャ分析の先行研究の調査があった。2022年度では、上記のうち、テストの模擬問題について、語彙レベルのチェックを行いつつリーディング問題の模擬問題を策定した。また、研究代表者の冬野の要件定義に基づき、研究分担者の野上が生体センサの事例調査を行い、実験で用いることが可能な技術をリストアップした。ジェスチャ分析の先行研究について、研究分担者の土屋がマルチモダリティに基づく複数の研究を調査した。また、研究分担者の齊藤が複数人シーンにおけるジェスチャ分析のトラッキング処理について、技術をブラッシュアップし検証した。更に、計画には挙げていなかったが、冬野がＶＲライティングシステムのプロトタイプを開発した。

随着工业界、学术界和政府致力于开发全球人力资源，英语四技能评估测试在入学考试等各种情况下变得极其重要。然而，全球标准化测试存在无法精细地区分日语口语能力广泛分布的水平的问题，因此开发了本地测试。该研究项目旨在解决日本人参加英语四项技能评估测试时的焦虑和高成本问题，特别是在口语评估方面。该项目的目的是开发一种沉浸式虚拟现实（VR）英语交流方式。能力评价体系并与常规测试进行比较，衡量其有效性和可操作性。 2022年计划中列出的基本分析包括想象验证实验中使用的具体场景并设置模拟测试题、拍摄模拟面试场景的360度视频进行试点分析以及准备验证实验中使用的生物材料。传感器的案例研究和对手势分析先前研究的调查。 2022财年，在上述测试题中，我们在检查词汇水平的同时制作了模拟阅读题。此外，根据研究代表Fuyuno定义的要求，共同研究员Nogami进行了生物传感器的案例研究，并编制了可用于实验的技术列表。关于之前关于手势分析的研究，联合研究员 Tsuchiya 调查了多项基于多模态的研究。此外，联合研究员 Saito 还对多人场景中手势分析的跟踪处理技术进行了梳理和验证。此外，虽然没有包含在计划中，但Fuyuno开发了VR照明系统的原型。