Developing and validating an online tool for learning and teaching how to write summaries in English

开发和验证用于学习和教授如何用英语撰写摘要的在线工具

基本信息

批准号：
20H01292
负责人：
澤木泰代
金额：
$ 8.82万
依托单位：
Waseda University
依托单位国家：
日本
项目类别：
Grant-in-Aid for Scientific Research (B)
财政年份：
2020
资助国家：
日本
起止时间：
2020-04-01 至 2024-03-31
项目状态：
已结题

项目摘要

2022年度の研究実績は主に2つにまとめられる。第一に、2020・2021年度に開発したオンライン学習教材モジュール群をより妥当なものにすることを目指し、試行テストの継続や要約解答採点基準の修正、そして機能拡充のための改修を行った。2021年度に続き、首都圏の大学の学部1年次英語アカデミック・ライティング授業担当者の協力を得て、授業履修学生計100名について教材の試行テストを実施した。結果は2020年度と類似しており、本教材で提供する様々なフィードバックに対する学生の満足度は概ね高く、学生は提示されるフィードバックに注目し、その情報を解答の修正版作成にある程度役立て、解答内容の質的向上につなげていることが確認できた。また、これまで学習者や教員から得られたコメントや先行研究の再吟味により、本教材で使用している要約評価基準を、これまでの「内容」「言語」の2観点から「内容」「パラフレーズ」「言語」の3観点へと変更するべく、採点者間での検討を重ねた。また、スコアレポートの内容充実や、授業における利便性向上のための相互評価機能追加を主とするシステム改修を行った。第二に、教材で提供する要約内容に関するフィードバックの一部自動化を目指して一連の検討を行った。その主な活動として、現在手動で提示している要約内容の自己評価チェックリスト項目に関する人間の採点者間の評価の一貫性を確認すると共に、各項目の自動化に適用可能なアルゴリズムを検討した。また、自動フィードバック作成で不可欠となる、要約タスクの元文書と学習者要約解答を意味単位にセグメント化する方法複数を比較検証した。この過程で得られた、idea unitという意味単位にセグメント化された学習者40名分の要約解答と元文書を、言語コーパスとして言語資源協会 (GSK) から公開した。

2022年的研究成果可概括为两个主要领域。首先，为了让2020年和2021年开发的在线学习资料模块更加有效，我们继续进行了试用测试，修订了摘要答案评分标准，并进行了扩展功能的修改。从2021年开始，我们在东京都地区大学一年级英语学术写作课导师的配合下，对总共100名上课的学生进行了教材试用。结果与 2020 学年相似，学生对本材料中提供的各种反馈的满意度普遍较高。学生关注所提供的反馈，在一定程度上使用这些信息来创建答案的修订版本，并改进他们的回答被证实，这导致了内容的质的提高。此外，通过重新审视学习者和教师的意见以及以往的研究，我们从“内容”和“语言”两个角度修订了本教材使用的概要评价标准，并进行了反复讨论评分者之间将分数更改为三个观点：释义和语言。我们还对系统进行了改进，主要包括丰富成绩报告的内容以及增加同伴评价功能以提高上课的便利性。其次，我们进行了一系列研究，旨在自动化对教材中提供的摘要的一些反馈。主要活动是确认人类评分者之间对当前手动呈现的摘要的自我评估清单项目的评估的一致性，并考虑可用于自动化每个项目的算法。我们还比较和验证了将摘要任务的原始文档和学习者的摘要答案分割为语义单元的多种方法，这对于创建自动反馈至关重要。通过此过程获得的 40 名学习者的摘要答案和原始文档被分割为称为想法单元的语义单元，由语言资源协会 (GSK) 作为语言语料库发布。