Development of e-Testing platform ensuring sustainable reliability

开发电子测试平台确保可持续可靠性

基本信息

批准号：
19H05663
负责人：
植野真臣
金额：
$ 103.08万
依托单位：
The University of Electro-Communications
依托单位国家：
日本
项目类别：
Grant-in-Aid for Scientific Research (S)
财政年份：
2019
资助国家：
日本
起止时间：
2019-06-26 至 2024-03-31
项目状态：
已结题

项目摘要

本研究は，近年ニーズが高まっている筆記式試験や実技試験などのパフォーマンステストを含んで，高精度の測定誤差が持続するeテスティングプラットフォームを開発し，実運用によりその有効性を示すことを目指している．令和3年度は，提案プラットフォームを構成する以下の基礎技術について，令和2年度に引き続き研究を進めた．1）最大クリーク・アルゴリズムと整数計画法を用いて，テスト生成数をより向上させるアルゴリズムの開発，2）項目露出を一様とする等質テスト自動構成アルゴリズムの開発，3）項目露出を制御する等質適応型テストの開発，4）異質評価者の同定と継続的なトレーニング手法の開発，5）自然言語処理を用いた筆記試験における自動採点手法の開発．1）と2）については実装と評価実験が完了し，研究成果は英文誌Behaviormetrikaに掲載された．3）についても順調に技術開発は進んでおり，論文投稿を進めている．4）については，異質評価者の特性を多次元的な尺度で表現できる新たな項目反応モデルを開発し，国際論文誌Behaviormetrikaと教育分野における人工知能活用に関する主要国際会議であるArtificial Intelligence in Educationに成果が採択された．5）については，深層学習モデルと項目反応理論を組み込んだ新たな方法論を複数開発し，英文論文誌IEEE TransacstionsとBehaviormetrikaに1本ずつ，電子情報通信学会論文誌に2本，教育システム情報学会に1本の論文が掲載された．また，本研究テーマの主要課題の一つである「パフォーマンステストの継続運用を想定した運用デザインの設計とその実施支援システムの開発」に関しては，東京医科歯科大学での実証実験を実施し，実データを取得した．

这项研究旨在开发一个电子测试平台，该平台维持高精度测量错误，包括近年来诸如书面和实际测试之类的绩效测试，并通过实际使用来证明其有效性。在2021财年，我们在2020财政年度继续进行研究，以构成提案平台的以下基本技术。 1）开发使用最大Creek算法和整数编程生成的测试数量的算法； 2）开发使项目暴露统一的自动均匀测试配置算法； 3）开发控制项目暴露的同质自适应测试； 4）识别异质评估者和持续培训方法的发展； 5）开发使用自然语言处理的书面测试的自动评分方法。 1）和2）的实施和评估实验已经完成，研究结果发表在《英语杂志行为》中。关于3），技术发展正在稳步发展，并且正在提交论文。关于4），开发了一个新项目响应模型，该模型可以在多维范围内表达异质评估者的特征，并在教育中采用了国际杂志《行为行为》和人工智能，这是一项关于人工智能在教育领域使用的主要国际教育会议。关于5），开发了多种新方法，它们结合了深度学习模型和项目响应理论，一篇论文发表在《英国期刊IEEE Transacsions and BehaviorMetrika》中，这是电子，信息和通信工程师研究所的两篇论文，以及教育系统和信息技术和信息技术学会和信息技术学会中的一篇论文。此外，关于本研究主题的主要问题之一，“设计运营设计的目的是继续进行性能测试并开发支持实施的系统，”在东京医学和牙科大学进行了示范实验，并获得了实际数据。