教育测量的主要工具是测验,测验的质量直接影响到教育测量的效果,因此,在使用某个测验之前,必须对其进行科学的质量分析。测验的质量一般要从两个方面来分析:一是分析每个项目的质量指标,即分析测验项目的难度和区分度。二是分析整份测验的质量指标,即分析测验的信度和效度。
一、项目质量分析
(一)难度
1.难度的概念
难度是指测验项目的难易程度,它通常是用答对或通过该项目的人数比例来表示。一个测验项目,如果大部分被试都答对或通过,则该项目的难度就小;相反,难度就大。
2.难度的计算
(1)二分法记分项目(客观题)的难度计算。二分法记分项目是指只有答对和答错两种情况的题目,答对得分,答错0分,因此,也称(0、1)记分项目,如选择题、是非题、填空题、匹配题等。这类项目的难度计算一般有两种方法。
①通过率。用答对或通过该项目的人数的百分比表示:
式中P为项目难度,R为答对或通过该项目的人数,N为全体被试人数。
例1:200名学生参加考试,答对某项目的人数为160人,则
如果答对的人数为60人,则
如果答对的人数为200人,则
如果没有人答对,则
从例1可以得到以下两个结论:
第一,P值的范围:0≤P≤1
第二,通过人数越多,P值越大,项目难度越小;通过人数越少,P值越小,项目难度越大。可见,难度值与难度成反比。
②极端分组法。当被试人数较多时,为节省时间和精力,可采用此法,具体步骤如下。
第一步,按测验总分从高到低依次排列试卷。
第二步,从最高分的试卷开始,由高到低依次取出全部试卷的27%作为高分组;从最低分的试卷开始,由低到高依次取出全部试卷的27%作为低分组。