arrow
返回

Variable-Length Cognitive Diagnostic Computerized Adaptive Testing in Small-Scale Assessments

delete2025-10-01
delete0
PRE
AI
P
Pablo Nájera *
M
Miguel A. Sorrel
C
Chia‐Yi Chiu
F
Francisco J. Abad
DOI:10.3102/10769986251366581delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
本研究考察了认知诊断计算机化自适应测试(CD-CAT)在小型评估中的创新方法。基于参数认知诊断模型(CDMs)的传统CD-CAT方法,在小型标定样本中往往难以应对,导致过拟合和可靠性高估。非参数替代方法虽然在小型场景中更稳健,但缺乏可靠性信息,限制了分类置信度和变长自适应测试。为解决这些挑战,我们提出了四种基于简约受限确定性输入、噪声和门(R-DINA)模型的CD-CAT方法,该模型是一种专为小样本设计的参数CDM。其中两种方法使用标定样本(R-GDI和R-NPS),另外两种为免标定方法(R-NPSML和R-NPSBM)。通过模拟研究,我们调整了标定样本量、属性数量和项目质量,将上述方法与基于DINA模型的常规CD-CAT进行比较。结果表明,R-GDI和R-NPS在后续概率恢复的准确性、分类准确性和项目使用均衡性方面均优于常规CD-CAT,尽管其测试项目数量较多。免标定方法表现也较满意,但在低质量项目上存在可靠性高估现象。总体而言,所提方法为教育情境中样本量小且时间受限的形成性评估提供了实用解决方案。我们针对这些方法在真实教育环境中的使用和可扩展性提出了建议。
Keyword:
cognitive diagnosis
computerized adaptive testing
nonparametric classification
classification accuracy
reliability estimation

期刊

J
Journal of Educational and Behavioral Statistics
IF:
1.7
论文数:
38
被引数:
2.9K

机构

C
Columbia University
学者数:
7.1W
论文数: 6.4W
被引数: 263
C
Comillas Pontifical University
学者数:
1.4K
论文数: 1.2K
被引数: 10
A
Autonomous University of Madrid
学者数:
2.1W
论文数: 1.7W
被引数: 29
学者 查看更多机构
引用论文

引用论文

err分享
err收藏
err分享
err收藏
学者 查看更多内容