項目反応間の局所依存度が項目およびテストの諸特性の推定に与える影響

项目响应之间的局部依赖性对项目和测试特征估计的影响

• 批准号: 12J10650
• 负责人: 登藤 直弥
• 金额: $ 1.15万
• 依托单位: The University of Tokyo
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for JSPS Fellows
• 财政年份: 2012
• 资助国家: 日本
• 起止时间: 2012 至 2013
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/grant/KAKENHI-PROJECT-12J10650/
• 关键词: 項目反応理論; 局所独立性; 局所依存性; テスト情報量; 特性値; 項目母数; 項目母数の比較可能性; 古典的テスト理論

日本でよくみられる大問形式の問題においては, 同じ特性値(e.g., 学力)を有する受験者であっても, 大問に含まれる問題文や図表をたまたま正確に読み取れた受験者は関連する項目群すべてに正答する確率が高くなり, 特性値で条件付けた際の各項目への回答が互いに独立ではなくなると考えられる。本年度一つ目の研究においては, このような項目反応間の局所依存性が特性値で条件付けたうえでの独立性(局所独立性)を仮定したテストの特性(テスト情報量)の推定にどのような影響を及ぼすのか, シミュレーション実験を行い, 系統的な検討を行った。その結果, 局所依存性を考慮せずに局所独立性を仮定してテスト情報量の推定を行うと, テスト情報量が過大推定されてしまい, テストの品質が誤って高く見積もられてしまうことが明らかとなった。一方, 本年度二つ目の研究においては, テストの作成・実施場面への成果の応用可能性を高めるために, これまでに得られた研究成果について再分析を実施した。具体的には, 受験者特性および項目特性の推定に対し局所依存性の与える影響く推定のズレ)が受験者特性や項目特性のちらばり具合(散布度)と比較した場合に意味のある大きさとなっているのか, 検討を行った。その結果, 条件や使用するモデルにより結果に違いが見られるものの, このような要因に拠らない知見として, 局所依存性を考慮せずに受験者特性値や項目特性値の推定を行うと, 特に受験者数が少ない場合には, 推定量のバイアスや平均二乗誤差平方根(推定のズレ)が大きくなるということが明らかとなった。このことからは, 異なるテスト間で特性値の比較を行うという文脈においては, 局所依存性が無視できないほどの影響を有していることが伺える。これらの研究により, 平成25年度には, テストの作成・評価・運用に資する知見を提供することができたといえる。

在日本常见的大题格式题中，即使考生具有相同的特征值（例如学术能力），那些恰好能够准确阅读大题中包含的题文和图表的人也会被淘汰。人们认为，正确回答所有项目组的概率会增加，并且当以特征值为条件时，每个项目的答案不再彼此独立。在今年的第一项研究中，我们研究了如何在假定独立性（局部独立性）的情况下估计测试特征（测试信息量），然后通过特征值调节项目响应之间的局部依赖性，并进行了系统研究，以确定这是否成立。才会有这样的效果。结果，如果通过假设局部独立性而不考虑局部依赖性来估计测试信息量，则测试信息量将被高估，并且测试的质量将被错误地高估。另一方面，在今年的第二次研究中，我们重新分析了迄今为止获得的研究成果，以增加结果对测试创建和实施情况的适用性。具体而言，与应试者特征和项目特征的离散程度（分散度）相比，局部依赖性对应试者特征和项目特征的估计的影响（估计偏差）是有意义的大，我们调查了是否是这种情况。结果，虽然根据所使用的条件和模型的不同，结果存在差异，但不依赖于这些因素的一个发现是，当在不考虑局部依赖性的情况下估计审查员特征值和项目特征值时，它变成了显然，当考生人数较少时，估计器的偏差和均方根误差（估计差异）变得特别大。这表明，在比较不同测试之间的特征值的背景下，局部依赖性具有不可忽略的影响。通过这些研究，可以说我们在2013年能够提供有助于测试创建、评估和操作的知识。

项目成果

大周形式の問題の項目群への項目反応に対する確率モデルの比較

圆形问题中项目组项目响应的概率模型比较

• 发表时间: 2012
• 期刊: 日本テスト学会誌
• 作者: 登藤直弥;登藤直弥
• 通讯作者: 登藤直弥

項目反応間の局所依存性が項目母数の推定に与える影響:項目母数の比較可能性を確保した上での検討

项目响应之间的局部依赖性对项目总体估计的影响：确保项目总体可比性后的研究

• 发表时间: 2012
• 期刊: 行動計量学
• 作者: 登藤直弥;登藤直弥;登藤直弥
• 通讯作者: 登藤直弥

項目反応間の局所依存性が受験者, 項目およびテストの諸特性の推定に与える影響の検討

检查项目响应之间的局部依赖性对考生、项目和测试的各种特征的估计的影响

• 发表时间: 2014
• 期刊: 東京大学大学院教育学研究科博士論文
• 作者: 登藤直弥

An effect of local dependency for reliability estimation

局部依赖性对可靠性估计的影响

• 发表时间: 2012
• 作者: Imamura K;Imamachi N;Akizuki G;Kumakura M;Kawaguchi A;Nagata K;Kato A;Kawaguchi Y;Sato H;Yoneda M;Kai C;Yada T;Suzuki Y;Yamada T;Ozawa T;Kaneki K;Inoue T;Kobayashi M;Kodama T;Wada Y;Sekimizu K and Akimitsu N.;登藤直弥;Naoya Todo
• 通讯作者: Naoya Todo

項目反応間の局所依存性が点双列相関係数ならびに通過率に与える影響の検討

检查项目响应之间的局部依赖性对点双列相关系数和通过率的影响

• 发表时间: 2012
• 作者: 登藤直弥;登藤直弥;登藤直弥;Naoya Todo;登藤直弥
• 通讯作者: 登藤直弥