式中,D为区分度,PH为高分组(即排名前27%的被试)在该项目上的通过率,PL为低分组(即排名后27%的被试)在该项目上的通过率。
例6:在370名被试中,选出高分组和低分组人数,其中高分组有70人答对第一题,低分组有40人答对第一题,求第一题的区分度。
解:高分组和低分组的人数为
因此,第一题的区分度为0.30。
②非二分法记分项目(主观题)区分度的计算。
计算公式为:
式中,D为区分度,XH为高分组(即排名前25%的被试)测验总分,XL为低分组(即排名后25%的被试)测验总分,H为该项目最高得分,L为该项目最低得分,N为被试总人数。
例7:有100名被试参加某个测验,其中第5题是论述题,满分12分。按高低分各占总人数的25%分组,其中第5题的得分统计如表6-2所示,求该题的区分度。
表6-2 论述题分析表
在分析表中,x为被试在该题得到的各种分数,f为得到各种分数的人数,fx为各种分数与得到各种分数的人数之乘积。
解:以上数据,已知N=25,XH=238,XL=158,H=12,L=4,
则有:
因此,这道论述题的区分度为0.40。
1965年,美国测验专家伊贝尔()根据长期的经验提出了用鉴别指数评价项目性能的标准,如表6-3所示。
表6-3 测量的鉴别指数与优劣评价
以上标准仅供参考,不是绝对的。
(2)相关法。相关法就是通过计算项目得分与测验总分的相关系数来估计区分度的方法。由于测验项目的类型不同,采用的相关法也不同。
①积差相关法。非二分法记分项目(主观题)的区分度,可采用积差相关计算。即计算某项目得分与测验总分的相关系数。
其计算公式为:
例8:12名学生参加某学科测验,其中第6题(主观性试题)得分为x,测验总分为y,结果如下,求第6题的区分度。
则,区分度为:
因此,第6题的区分度为0.60。
②点二列相关法。二分法记分项目(客观题)的区分度,可采用点二列相关法计算。
其计算公式为:
例9:10名学生参加某学科测验,其中第1题(选择题)得分为x(1表示答对,0表示答错),测验总分为y,结果如下,求第1题的区分度。
解:根据表中数据求得
则,区分度为:
因此,第1题的区分度为0.354。
3.区分度与难度的关系
区分度与难度有密切的关系。难度直接影响到项目得分的方差,而方差又反映项目得分的离散程度,直接影响到区分度的大小。研究表明,难度越接近0.50,分数的分布范围越大,方差越大,区分度也越大。表6-4说明了区分度与难度的关系。
表6-4 区分度与难度的关系
二、测验质量分析
难度和区分度是测验项目的质量指标,但即使每个项目都有适宜的难度和较高的区分度,合成一份测验后质量也未必就好,因此还需要分析整份测验的质量指标,即分析测验的信度和效度。
(一)信度
1.信度的概念
信度是指测验结果的可靠性,即测验结果的一致性或可信性程度。换句话说,一个信度高的测验,对同一个人或同一组被试先后施测两次,结果应保持一致,否则,就是信度不高的测验。
一个好的测验,只要按测量规则进行操作,其结果就不应随测验使用者或使用时间等方面的变化而发生较大的变化。例如:用标准的钢尺去测量一张桌子的长度,无论是谁,只要操作方法正确,所测的结果是基本一致的,但如果所用的是一种具有较大弹性的皮尺,则不同的人或同一个人在不同时候去测量,其结果必然会有较大的误差,这说明用皮尺去测量信度不高。