学年论文 试卷信度的检验与分析 数学093班

杭州师范大学本科生学年论文

其中R为信度系数, K为整份试卷的题目数,所有考生所得总分的方差.

2. 4 影响试卷信度的因素

Si22Si 为所有考生在第题得分的方差,为

测验信度主要反映的是测验中控制误差能力的强弱,如果明确了误差来源. 就能够有目的地加强对误差的控制,以此提高测验信度. 测验误差主要来源于：测验卷与测试题、考生因素、施测环境、评价标准与评分等四个方面. 一套试卷信度过低一般有如下原因：

（1）试卷本身设计不合理,不是围绕一个主题而是有矛盾的题目. 如果试卷中有题目让完全

相同的人选择不同的答案,试卷的信度会降低.

（2）题目区分度过低,特别指有对错之分的题目. 如果一道题正确率或错误率达到90%,可

以从新审视题目设计是否合理. 区分度过低的题目中真实偏差的成分较少,随机偏差的成分相对较多,试卷的信度会降低.

（3）无关变量进入信度检验. 除了重测信度,其他信度检验方法都只考虑有序变量,无序变

量,如出身地方,喜好等,如果我们没有对地方或喜好排序的话,带入信度检验意义难明,可能会导致试卷的信度降低.

（4）题目选项反序. 对有序变量,如果变量值之间序的意义相反,会降低甚至得出负的信度.

比如检验老师对学生评分的信度,如果一个老师的评分以10分为最高分,1分最低,另一个以1分最高,10分最低. 如果不经处理带入信度计算,信度会降低7.

3、 学生成绩的信度分析

3. 1 试卷内部一致性的检验与分析

此以科隆巴赫?信度系数表示法为例. 分别采用excel与spss软件分析.

某班共有20名学生,表二是该班某次期末数学测验的原始成绩统计表【附表一】,该数学考卷由25道题目组成,其中1~10为单选题,每题3分；11~16题为填空题,每题3分；17~25为解答题,分值依次为9,9,10,10,12,12,12,14,14,14分；试卷满分为150分. 测量该次测验的信度.

方法一：利用excel软件计算,分三步进行.

第一步：计算每道题目的标准差；

步骤:1、运用“STDEV”函数,在C23中键入“=STDEV（C2：C22）”,按ENTER

7 http://baike. baidu. com/view/363144. htm

第 9 页 (共 19 页)

杭州师范大学本科生学年论文

键,返回值就显示在C23中；

2、将光标放在单元格C23的右下角,显示“+”,按住左键拖曳光标,就可以得出2~25题以及测验总分的标准差. 结果参见【附表二】

第二步：计算每道题目的方差；

步骤：1、在单元格C24中键入“=C23*C23”,按ENTER键,得到返回值；

2、将光标放在单元格C24的右下角,显示“+”,按住左键拖曳光标,就可以得出2~25题以及测验总分的方差. 结果参见【附表三】

第三步：计算测验卷信度的内部一致性系数. 据公式（3）,用

25?2???xi25?i?1??1?25?1??x2????????

来估计测验信度. 在C25中键入“=（1-SUM（C23：AA23）/AB23）*25/24）”,按ENTER键回车,得到?=0. 417398. 再由“表一”可知：该测验信度低. 建议对试卷进行修改（如果试题多于10道）. 需要补充其他考试来可靠地确定分数或等次.

方法二：利用spss软件,分两步进行.

第一步：将数据导入spss；步骤：在spss数据编辑器中,找到扩展名为“. xls”所需

文件,然后根据提示,将学生各题分数与总分数导入spss数据编辑器中（本次运用spss18. 0windows汉化版）,将之保存为扩展名为“. sav”的文件.

第二步：依次执行执行“分析”,“度量”,“可靠性分析”,在弹出的对话框将“

V2~V26”

选入“项”的方框中,“模型”选择“?”；然后单击“统计量”,出现：“可靠性分析：统计量”对话框,选择“项之间”方框中“相关性”,单击“继续”,回到“可靠性分析”对话框,单击“确定”. 得到下表：

表二：

Reliability Statistics Cronbach's Alpha . 419 Cronbach's Alpha Based on Standardized Itemsa -. 116 N of Items 23 第 10 页 (共 19 页)

杭州师范大学本科生学年论文

a. The value is negative due to a negative average covariance among items. This violates reliability model assumptions. You may want to check item codings. 科隆巴赫?系数值是0. 419. 去除“

V4,V5”两项后,科隆巴赫?系数值是-0. 116.

由于样本过小,仅20人. 可以增加测试人数,以提高其测验信度.

3. 2 试卷外部一致性的检验与分析

下表为10名小学生两次竞赛测验表： 表三： 学号 1 2 3 4 5 6 7 8 9 10 竞赛1 65 70 88 78 90 57 89 83 69 79 合计 5. 2. 1由公式（4）,

竞赛2 87 65 91 77 86 69 92 84 66 81 竞赛1等级 竞赛2等级 9 7 3 6 1 10 2 4 8 5 55 3 9 2 7 4 8 1 5 10 6 55 等级差D 6 -2 1 -1 -3 2 1 -1 -2 -1 0 D2 36 4 1 1 9 4 1 1 4 1 62 rs?0.624?0.5,说明两次测验基本一致.

5. 2. 2运用spss软件分析,共四步.

第一步：将数据导入spss数据编辑器中. （步骤同上） 第二步：依次执行“分析”,“相关”,“双变量”.

第三步：将“竞赛1”,“竞赛2”选入“变量”下的空框中. 在“相关系数”选项下,

第 11 页 (共 19 页)

杭州师范大学本科生学年论文

选中“Spearman”；在“显著性检验”选项中,选中“双侧检验”；选中“标记显著性相关”.

第四步：单击“确定”,输出下表： 表四：

Correlations Spearman's rho V7 Correlation Coefficient Sig. (2-tailed) N V8 Correlation Coefficient Sig. (2-tailed) N 分析结果：

据表四显示,样本总数是10,竞赛1与竞赛2测验的Spearman相关系数值为0. 663, sig值为0. 037. 不可接受零假设. 两次竞赛基本一致. 意见与建议

基于此,要使两次测验信度一致,两次测验题难度,题型,涵盖范围等基本一致即可.

4、 意见和建议

影响测验信度的因素很多,主要有试卷的难度、题型、题量、测验的内容、测验的组织、测验时间的长短、评分的客观程度、应试环境等,其中试卷的难度、题型、题量、测验的内容是由命题者把握的,也是影响测验信度的重要因素. 基于上述结果,提出入下建议：

(1)适当加大一些试题的难度和区分度,来区分学生实际水平的差距,平均难度控制在0. 45～0. 55之间,选择题、判断题所占的分值比例不能太大,一般介于15%～30%之间；

(2)题量不能太少,覆盖面不能太窄. 一般,一份试卷不少于30道题,覆盖面不低于考查内容的80%,避免内容过偏的题和语意表达模糊的题.

(3)测验人数应当适当的多（本题仅20人）,避免容量太小造成试卷信度降低.

V7 1. 000 . 10 . 663* . 037 10 V8 . 663* . 037 10 1. 000 . 10 *. Correlation is significant at the 0. 05 level (2-tailed). 参考文献

[1]胡中锋,李方. 教育测量与评价[M]. 广州:广东高等教育出版社,2000.

第 12 页 (共 19 页)