信度是任何一个测验的必要条件,对于教育测量来说,更为重要。因为教育测量的对象主要是精神现象,所测量的特性不易把握,为了能真实地反映被试的某种特点,需要更加注意测验的信度,从而正确地判断测量结果的价值。只有信度高的测验才能成为教育工作有用的工具,否则,测量的结果是无意义的、无效的。
2.信度的类型和估计方法
(1)重测信度。重测信度是指用同一测验,对同一组被试先后施测两次,然后根据被试的两次测验分数计算其相关系数。
重测信度是假定所测量的特性处于相对稳定的状态,如果用同一测验对相同被试先后施测两次,其结果相同或相近,说明测验结果具有稳定性,信度高,如果两次测验结果相差较大,则说明测验结果缺乏稳定性,即信度低。因此,重测信度也叫稳定性系数。
其基本模式为:
两次测验均以A表示,即两次测验完全相同,A的下标1和2表示同一测验施测两次,时距可短至几分钟,长可达数年。
重测信度即稳定性系数可使用积差相关系数的公式计算:
例10:用学习动机测验对15名被试先后施测两次(间隔时间为2周),得分如下,求该测验的信度。
解:根据表中数据求得
则,区分度为:
因此,该测验的信度为0.86。
使用重测法要注意以下三点。
①两次测验之间的时间间隔要适宜。重测信度的大小常常受两次测验的时间间隔长短的影响,间隔时间过短,第一次测验记忆犹新,容易回忆出上次的答案,因而夸大了稳定性,间隔时间过长,被试可能由于经验积累、练习、成熟的影响,成绩就可能与第一次大有差别,因而降低稳定性。间距应多长,应视测验类型和准备如何利用测验结果而定。比如,测量人格、智力等相对稳定的特质的测验,时间间隔可长些,学业成就测验的时间间隔要短些。在报告重测信度时,一般要说明时间间隔及被试在此期间的有关活动。
②重测法适用于速度测验而不适用于难度测验。因为速度测验题目较多,测验有足够长度,时间较紧,被试无暇慢慢地回忆,所以第一次测验的记忆影响较少。
③应注意提高被试的积极性,由于重测法是把原测验再测一次,所以被试容易兴趣索然,采取不积极合作的态度,使第二次测验质量降低,所以,调动被试的积极性很重要。
(2)复本信度。复本信度是指用两个等值(所测特质、题型、题数、难度、区分度等方面相同),但具体内容不同的测验,在最短时间内,对相同被试先后施测两次,然后根据两次测验分数计算其相关系数。
复本信度是衡量两个不同版本的测验的等值程度的指标,被试如果具备某一心理特质,那么,用性质相同而题目不同的两个等值测验来施测,结果应该具有一致性,否则的话,说明测验信度低。因此,复本信度也叫等值性系数。
其基本模式为:
这种方法是编制两份等值的测验(复本),先用第一种测验A对被试进行施测,接着(时距可短,两次测验接着进行)再用第二种测验B进行施测,然后求两次测验的积差相关系数,计算公式同上。
例11:对10名被试用两个等值的测验施测,测验得分分别用x和y表示,测验结果如下。求该测验的信度。
根据上面的计算方法,可求得:
因此,该测验的信度为0.78。
使用复本法要注意以下三点。
一是复本法的关键是两个测验必须等值,即两个测验所测特质、题型、题数、难度、区分度等方面相同,只是具体内容不同。要编制这样等值的两份测验非常不容易。
二是两次测验时距宜短,以避免知识积累、练习效应等因素的影响。
三是如果两次测验紧接着进行,要注意避免被试的厌倦心理。
(3)同质信度。上面的两种估计信度的方法,都必须对被试施测两次,然后计算两次得分的相关系数。同质信度只需施测一次。