実践語学力の学習支援に向けた生体情報の同期解析を用いた文章レベルの理解状態の評価

使用生物信息同步分析评估句子级别的理解，以支持实用语言技能的学习

基本信息

批准号：
22K02885
负责人：
秋元頼孝
金额：
$ 2.66万
依托单位：
Nagaoka University of Technology
依托单位国家：
日本
项目类别：
Grant-in-Aid for Scientific Research (C)
财政年份：
2022
资助国家：
日本
起止时间：
2022-04-01 至 2026-03-31
项目状态：
未结题

项目摘要

本年度は、英語音声のリスニング時の脳波を計測する実験を実施した。実験では、英語音声のみを聴覚提示する条件と、英語音声の聴覚提示に加えて英語音声の内容を日本語に翻訳したものを字幕として視覚提示する条件とを設定し、両者で脳波を比較することを予定していた。しかしながら、実験終了後の得られた脳波データを確認すると想定以上のアーチファクトが含まれていることが分かり、様々なノイズ除去の手法を試したものの、最終的には脳波データの解析を断念することになってしまった。英語音声のリスニング後に聞き取れた内容をPCに入力するという課題を行ったことにより、PCでキーボードを用いて入力する際に生じるノイズがその次のリスニング区間のデータまで汚染してしまった可能性が考えられるが、まだ原因が確定できていない。本実験では結果にバイアスがかかることを避けるために予定数のデータを取り終わるまではデータ解析を行わないようにしたため、それが裏目に出てしまった。そのため、字幕の有無による単語再生課題の得点の変化が、実験参加者の英語力によって異なるのかどうかを探索的に調べることとした。その結果、英語力が中程度の群においてのみ、日本語字幕の付与によって得点が向上する可能性が示された。この結果に関して、英語力が低い群は日本語字幕から英語に変換する能力がないため、また、英語力が高い群は英語音声を聞き取れるので日本語字幕から英語に変換する必要がないために、英語力が中程度の群においてのみ日本語字幕の効果が認められたのではないかと考えられる。また、日本語字幕の効果について品詞ごとの検討も探索的に行った。その結果、前置詞などの直接的に日本語字幕には表れにくい品詞においては、日本語字幕の効果がほとんど認められず、名詞や動詞などの直接的な形で日本語字幕に表われやすい品詞において得点の向上が見られることが明らかとなった。

今年，我们进行了一项实验，测量听英语音频时的脑电波。在实验中，我们设置了仅听觉呈现英语音频的条件，以及除了英语音频的听觉呈现之外，还以视觉方式呈现英语音频的日文翻译作为字幕的条件，并比较了脑电波我已经计划好了这两个条件。然而，当我们检查实验后获得的脑电图数据时，我们发现它包含的伪影比预期的要多，尽管我们尝试了各种噪声去除方法，但我们最终还是决定放弃对脑电图数据的分析。由于任务是在听完英语音频后将听到的内容输入到PC中，因此使用PC上的键盘输入时产生的噪音有可能污染了下一个听力部分的数据，但原因是这样的。尚未确定。在这个实验中，为了避免结果出现偏差，直到收集到计划数量的数据后才进行数据分析，但这适得其反。因此，我们决定探索性地调查单词回忆任务分数的变化是否因字幕的存在或不存在而变化，是否因实验参与者的英语水平而异。结果表明，添加日语字幕只能提高英语水平中等的组的分数。对于这个结果，认为英语水平低的组不具备从日语字幕转换为英语的能力，并且英语水平高的组不需要从日语字幕转换为英语，因为他们可以听到英语音频。仅在具有中等英语水平的组中观察到日语字幕的效果。我们还对日语字幕对每个词性的有效性进行了探索性研究。因此，对于介词等难以直接出现在日语字幕中的词性，日语字幕的作用不大，而对于容易以直接形式出现在日语字幕中的词性，例如很明显，名词和动词的分数都有所提高。