测验的信度和效度是衡量测验质量的主要标准。认知诊断测验要能够稳定、精确、精细地区分不同被试在目标领域中的掌握状态。测验结构应该与领域认知模型一致,同时能够在尽量精简的情形下,稳定地区分被试的发展水平。
(三)测验属性矩阵的定义
在定义了领域认知模型后,要保证测验编制过程中和编制结束后,测验及其题目能够很好地反映领域认知模型,测验题目与测量目标属性之间的关系定义是合适的。
(四)选择一个拟合良好的认知诊断模型或方法
该模型或方法能够基于测试数据和测验属性矩阵,估计每个被评价被试对领域认知目标的掌握状态。
(五)提供一份具有很好辅导作用的诊断性评价结果
根据被试的实际表现和领域认知模型,提供被试在该领域上的发展水平剖析信息,特别是存在不足的方面,并提出合理的改进意见。
(六)其他研究主题
认知诊断计算机化自适应测验、等值。
本书主要围绕上述内容展开叙述,但叙述的顺序会有调整。
本章小结
本章简要介绍了几个典型的心理与教育测量学理论的发展过程,简要分析了经典测量理论和项目反应理论的主要优势及存在的不足,并由此分析了认知诊断评价理论兴起的原因,最后还简要介绍了认知诊断评价理论的主要研究内容。
思考题
1.经典测量理论和项目反应理论的优势和不足分别是什么?
2.相对于已有的测量学理论,认知诊断评价理论的优势是什么?