マルチメディア利用の外国語学習プロセスにおける映像支援効果の解明

阐明视频支持在多媒体外语学习过程中的作用

基本信息

批准号：
17650262
负责人：
宮本節子
金额：
$ 2.24万
依托单位：
University of Hyogo
依托单位国家：
日本
项目类别：
Grant-in-Aid for Exploratory Research
财政年份：
2005
资助国家：
日本
起止时间：
2005 至 2007
项目状态：
已结题

项目摘要

●視線行動と脳活動を連動測定する方法の再検討を総合的に行った。過去2年間に開発あるいは改良した計測手法により得られた、次の3つの観点のデータをすり合わせ、その妥当性と問題点を検討した(宮本他、2007;Kinoshita, et. al.,2007)。1)学習後のリコールテストおよびストラテジーについてのインタビュー結果2)視線行動を注視点軌跡、視線移動距離と速度、視線停留時間から調査した結果3)課題遂行中の学習者の脳血流量変化を光トポグラフィで測定した結果視線軌跡の定性データだけでなく、移動距離と移動速度、瞳孔径の時系列変化など量的データが得られ、従来よりも高い精度で視線行動が解明できた。また、読解活動の各側面(文字解読、映像視聴など)における脳活動を、部分的であるが、明らかにすることができ、妥当性が保証できた。ただ、一方で、問題点も浮かび上がった。視線行動と脳活動の関係について、各測定器を厳密には同期させることができず、また、同期タイムスタンプもとれなかったために、同調傾向の確証を得ることができなかった。●マルチメディアの読解過程を直接的・多層的に解明した(木下他、2007;宮本他、2007)1)英語力により異なる3つの音声追従読みパターンが明らかになった。初級:テキスト読みに音声が加わると文字列を視認することが困難になりパニックに陥る。読解頓挫。中級:音声による文字列の同時視認は可能だが、意味解釈の深化は困難。上級:音声追従で文字列視認を行い、同時に意味解釈を行う。文字列単独視認〜音声誘導文字視認〜直読(音声・文字列一致・解釈)と順次高次の理解に至る。2)メタ認知ストラテジーの成功と失敗が視線行動(瞳孔径)と脳活動(脳血流量)から裏付けられた。

●我们对测量凝视行为和大脑活动结合的方法进行了全面综述。从过去两年中开发或改进的测量方法获得的以下三个角度的数据进行了完善，并检查了有效性和问题（Miyamoto等，2007; Kinoshita等，2007）。 1）通过学习后的回忆测试和策略进行访谈的结果2）基于凝视点轨迹，凝视运动的距离和速度和凝视时间的凝视行为结果，以及凝视时间停止3）在使用光学图像中，在任务中，学习者的脑血流变化的变化不仅是在凝视轨迹上，而且还包括时间范围的变化，以及时间范围的量化速度和时间范围的速度和距获得的，使我们能够以比以前更高的精度阐明凝视行为。此外，尽管可以保证部分和有效性可以保证，但可以揭示阅读理解活动（例如解码和视频观看）的每个方面的大脑活动（例如解码和视频观看）。但是，也存在问题。凝视行为与大脑活动之间的关系没有准确地同步，也没有获得同步时间戳，因此无法获得交感神经趋势的确认。 ●直接阐明了多媒体阅读理解过程（Kinoshita等，2007； Miyamoto等，2007）1）三种三种音频追踪阅读模式的表明，根据英语能力而有所不同。初学者：当音频添加到文本阅读中时，很难看到字符串并引起恐慌。阅读是失败的。中级：可以通过音频同时可视化文本字符串，但是很难加深语义解释。高级：通过遵循音频并同时解释语义来可视化字符串。它导致对字符串的更高理解，导致语音引导的视觉感知，直接读取（音频，字符串匹配，解释）。 2）凝视行为（瞳孔直径）和脑活动（脑血流）支持元认知策略的成功和失败。

项目成果

期刊论文数量（9）

专著数量（0）

科研奖励数量（0）

会议论文数量（0）

专利数量（0）

マルチメディア教材利用時の視線移動距離、移動速度、瞳孔径と脳血流量変化:L2学習者ストラテジーとの関連から

使用多媒体教材时眼动距离、运动速度、瞳孔直径和脑血流量的变化：从与二语学习者策略的关系来看

DOI：
发表时间：
2007
期刊：
日本教育工学会研究報告集 07-4
影响因子：
0
作者：
木下徹;宮本節子;大石晴美;今井裕之;柳善和
通讯作者：
柳善和

マルチメディア型読解教材における映像・語彙注釈機能に関する一考察:操作ログとアイカメラデータの分析を通して

多媒体阅读理解材料中的视频和词汇标注功能研究——通过操作日志和眼部摄像头数据分析

DOI：
发表时间：
2005
期刊：
外国語教育メディア学会第45回全国研究大会発表要項
影响因子：
0
作者：
宮本節子;今井裕之
通讯作者：
今井裕之

Test-taking strategies and cognitive resources: A brain science approach to language assessment

考试策略和认知资源：语言评估的脑科学方法

DOI：
发表时间：
2007
期刊：
影响因子：
0
作者：
Toru Kinoshita;Setsuko Miyamoto;Hiroyuki Imai;Harumi Oishi.;大石晴美;木下徹・大石晴美;宮本節子・木下徹・今井浩之・大石晴美;木下徹・大石晴美・宮本節子・今井裕之;大石晴美;木下徹・今井浩之・大石晴美・柳善和;Toru Kinoshita and Harumi Oishi
通讯作者：
Toru Kinoshita and Harumi Oishi

マルチメディア教材利用時の学習履歴データの妥当性の検証:視線行動を中心として

使用多媒体教材验证学习历史数据的有效性：关注注视行为