正在阅读《第二节 题目属性定义和检验》
第(1/3)页


题目属性定义一般有两种情形:一种是在已经定义好了测量目标认知模型的情形下,有目标地命制适合不同属性及其结构的题目;第二种情形是对于已经命制好的题目,需要事后给题目定义属性。

一、题目属性的事先定义

在定义好了测量目标认知模型的情形下命制题目,这应该是一个比较直接的过程。根据前面关于测量目标认知模型定义的方法,同时结合文献调查、专家定义对各类数据分析之后,可以得到一个关于测量目标认知模型的细致定义,包括各认知成分的定义及其结构关系的定义,而且还匹配一套关于认知成分的比较标准的示例题目。命题专家在这些信息的基础上命制题目,只需要严格按照认知模型的定义和提供的示例题目,这样获得的题目和属性之间应该可以保持比较高的一致性。

二、题目属性的事后定义和验证

为命制好的题目事后进行属性定义,这是一个过程。在进行题目属性定义之前,当然也需要首先定义测验的认知模型,测验认知模型的定义过程和上一种情形是相同的,只不过在当前这种情形下,题目命制和认知模型的定义是两个独立的过程,是事后再将两者结合在一起的。事后题目属性定义的方法主要有两种:一种是专家定义法;另一种是统计推断法。

专家定义法是领域专家参照定义的认知模型,为题目指定属性。如果认知模型定义地足够细致,且有参照示例题目,那么,专家的题目属性定义过程应该会比较有效。如果条件允许,最好能够给领域专家提供代表性被试的作答过程原始资料,以保证属性定义结果更加稳定有效。在专家定义法的实施过程中,针对每套题目,至少应该安排3位领域专家进行独立属性标定,最后对定义的结果进行一致性程度评价。如果整体一致性程度较低,那么专家对测验认知模型的理解可能存在歧义。如果只是在某些题目属性的定义上一致性程度较低,那么就需要根据具体问题分析产生的原因,最后专家达成一致意见。

应用统计推断法来给题目定义属性,是一种基于数据驱动的属性定义方法。统计推断法定义题目属性主要应用在两个方面:一是对已定义属性的题目进行验证,基于数据信息判断属性定义是否合适;二是对未定义属性的题目指定属性。

认知诊断模型用于描述拥有某种属性掌握模式的被试在定义了属性模式的题目上的作答反应。如果模型无法描述这两者之间的关系,那么模型参数就会表现异常。比如,当题目属性定义错误时,它就无法与被试属性掌握模式之间产生正确的对应关系,导致函数模型被扭曲,模型参数出现异常。许多研究者基于这种逻辑提出了不同的题目属性验证方法,以及对这些方法的改进。这里只介绍其中的两种方法供读者参阅和研究。

德拉托尔(delaTorre,2008)提出了一种基于DINA模型的题目属性验证方法——基于EM算法的δ系列搜索法(thesequentialEM-based δ-method)。假设某领域有K个属性,用αl(l=1,2,…,2K)表示2K种属性掌握模式,qj表示题目j的属性向量。对于DINA模型来说,如果题目属性定义正确,那么,掌握了所有属性的被试与未掌握所有属性的被试之间的正确作答概率之差应该达到最大,即正确的题目属性定义qj应该满足如下定义:

德拉托尔又提出了两种基于该指标的搜索正确题目属性定义的方法(delaTorre,2008):一种是穷尽搜索法;另一种是系列搜索法。

相关小说

宠妻狂魔:爹地,妈咪是我的 青春 / 完结
宠妻狂魔:爹地,妈咪是我的
一笔旧梦
惨遭妹妹陷害,她和陌生男人有了一夜情,五年后回归,却被腹黑又软萌的小娃娃被缠上。介绍一下,这是我爸,我觉得你们非常般配。总裁一脸冷酷将结婚证丢到了她面前,你已经是我的合法妻子了。什么情况?捡娃娃还带买一送一的?
27.59万字 4 年前
至尊魔妃,废柴大小姐 青春 / 完结
至尊魔妃,废柴大小姐
玖阑夜大人
她,是濮氏家族的濮四爷,打架找场子样样齐活。 她,潘家的废柴小姐,寄人篱下,受尽欺凌,样样占尽。 当她变成了她,功法仙器在手,宝贝丹药齐活。 敢算计她? 阴谋诡计,勾心斗角,全是她当年玩剩下的! 她定要让那些欺负她的人百倍偿还! 他,冷面仙君,修为超群,九重天门仙君之首,天帝都得给上几分薄面。 世人皆道他无心,偏偏他却认准了她,宠她入骨。 为渡她成仙,甘愿散去半生修为……
68.91万字 3 年前
顾先生,离婚吧! 青春 / 完结
顾先生,离婚吧!
冬菇家的猫
五年前,她被自己的丈夫陷害失身,家破人亡;为了报仇,她一人流落异国他乡,尝尽辛酸;四年后,她华丽回归,当名扬全城的美女设计师,碰上昔日里的前夫,又会擦出什么样的火花?
67.01万字 3 年前
嫡女重生,朕的皇后总想逃 都市 / 完结
嫡女重生,朕的皇后总想逃
涅凰
一朝眼瞎,一生凄苦,重活一世的沈姝誓要擦亮眼,防火防盗防渣男!渣男贱女,断她手脚筋,杀她长子,害她长女,毁她幼女!呵,这一桩桩,她都要同他们清算!渣男妄想攀附权贵?那就让他身败名裂!贱女阴毒?那就撕了她的美人皮!一心只有仇恨的她却无意间招惹到了一个了...
98.25万字 9 天前
农门冲喜小娘子 玄幻 / 完结
农门冲喜小娘子
笑猫嫣然
农门冲喜小娘子,相亲对像是初恋?呆了! 一口茶水没顺下去,嗝屁了。 再睁眼,床上躺着病歪歪的相公,她成冲喜娘子了? 屋子是借的,米缸是空的,地里长满荒草!!这到底是个什么情况?!! 床,只有一张?!被子,只有一条?! 白天伺候相公吃喝,晚上伺...
140.12万字 9 天前
星铁:重生成猫被符玄偷听心声 穿越 / 完结
星铁:重生成猫被符玄偷听心声
小太阳mt
++++琉光穿越到了的世界,但是本体却是一只流浪猫,并且还觉醒了一个好感度系统。该系统的作用是,让靠近琉光的人,都会对琉光产生好感。于是,第一个遇到琉光的符玄,一眼就喜欢上了这只圆滚滚、可爱的小猫,并将其带回了太卜司。但之后,符玄便发现,自己居然可以听见这小猫心里所想?!琉光:哎嘿嘿!符玄老婆今天又用她香香的、滑滑
158.16万字 6 天前