日本人英語学習者を対象にした英語要約分析的評価尺度の開発

针对日本英语学习者的英语总结分析评估量表的开发

基本信息

批准号：
22K13174
负责人：
加藤万紀子
金额：
$ 1.58万
依托单位：
Tohoku University
依托单位国家：
日本
项目类别：
Grant-in-Aid for Early-Career Scientists
财政年份：
2022
资助国家：
日本
起止时间：
2022-04-01 至 2026-03-31
项目状态：
未结题

项目摘要

英語要約ライティングは習得が困難であるためフィードバックを提供できる分析的評価尺度の使用が教育的に適している。しかし、項目評価の信頼性や妥当性、教育現場における実用性等の問題が残されている。本研究は、中上級英語学習者を対象にした先行研究が多かったことにも着目し、英語能力が多様な日本人英語学習者に対応できる英語要約文の分析的評価尺度の開発を目的としている。本科研実施１年目である2022年度は以下２つを実施した。1. 予備研究初中級英語学習者が作成した英語要約文をMain Idea Coverage（適切なメイン・アイディアの選別の有無）、Integration（論理的な情報凝集の有無）、Language Use（文法・語彙の誤用の有無）、Source Use（パラフレーズの有無・内容の正確性）の４項目から成る既存の尺度を用いて３名の評価者が評価を行ったスコアを、多変量一般化可能性理論を用いて、主に評価尺度の妥当性と実用性の検証を行った。その結果、MICとINTはほぼ同じ概念を測定する項目であること、そして実用性および信頼性に関してはLUとSUの評価の信頼性が低く、十分な評価者間の信頼性を確保するためには最低でも４人以上の評価者が必要であるなど残された課題が報告された。２. 評価者訓練および評価者からの評価に関する定量的・定性的データ分析本研究に備え、CEFR A1からC1レベルの日本人英語学習者から２種類の英文テキストの要約文データを収集した。そして、予備研究から得られた分析結果をもとに、母語や英語教授経験年数などが異なる7名の評価者を採用し、評価者訓練を実施した。評価の際には、上記のINT、LU、SUの3つの評価項目を使用し、評価者からは定量的データのほか、インタビューと質問紙を用いて評価が困難な点や分析的評価尺度構築に向けた意見を定性的データとして収集し分析を行った。

英语摘要写作很难掌握，因此使用可以提供反馈的分析评分量表在教育上是合适的。但是，诸如项目评估的可靠性和有效性以及教育环境中实用性之类的问题尚无可用。这项研究还着重于许多先前的研究，重点是中级和高级英语学习者，旨在为英语摘要句子开发分析评级量表，以容纳具有不同英语能力的日本英语学习者。在2022财政年度，即主要科学技术研究所的第一年，以下两个是进行的。 1。初步研究，由三个评估者使用现有量表评估的得分包括四个项目：主要思想覆盖范围（是否已选择了主要思想），整合（是否逻辑信息聚集），语言使用（语法和语法和词汇滥用和词汇滥用）以及来源的使用（无论是否使用语言和内容准确性）都可以用来验证整个量表和练习的量表和实践范围。结果，麦克风和INT是衡量几乎相同概念的项目，LU和SU评估的可靠性很低，至少需要四个评估者以确保足够的评估间可靠性。 2。关于评估者培训和评估者评估的定量和定性数据分析，在准备这项研究时，从CEFR A1至C1级别的日本英语学习者收集了两种类型的英语文本的摘要句子数据。根据从初步研究获得的分析结果，雇用了七位具有不同母语和多年教学经验的评估者，并经过了培训的评估者。在评估过程中，使用了以上三个评估项目：INT，LU和SU，除了来自评估人员的定量数据外，我们还收集了难以评估的观点的定性数据，并且旨在使用访谈和问卷来建立分析评级量表的观点。

项目成果

期刊论文数量（3）

专著数量（0）

科研奖励数量（0）

会议论文数量（0）

专利数量（0）

Examining the Dependability and Practicality of Analytic Rubric of Summary Writing Using Multivariate Generalizability Theory: Focusing on Japanese University Students with Lower-Intermediate Proficiency in English

用多元泛化理论检验摘要写作分析量规的可靠性和实用性——以英语中低水平的日本大学生为中心

DOI：
10.5539/elt.v15n9p82
发表时间：
2022
期刊：
English Language Teaching
影响因子：
0
作者：
Xethakis;L;& Rupp;M.;単艾テイ;単艾テイ;単艾テイ;Richard Miles;Richard Miles;Richard Miles;Makiko Kato
通讯作者：
Makiko Kato

A Survey of Japanese Learners of English with Diverse Proficiencies: What Makes Summary Assessment Difficult?

对不同水平的日本英语学习者的调查：是什么让总结评估变得困难？