第四章_方差分析与正交试验设计2

方差分析与正交试验设计

第四章方差分析与正交试验设计

某省高考语文作文评卷误差的计算机监控

高考语文试题评卷，特别是作文评卷，受评卷教师主观性干扰大，人为误差最难控制。随着高考内容改革力度不断加大，语文试卷的作文题越来越“活”，这种“活”，一方面为检验考生创新思维，给他们充分发挥写作能力提供了更大的空间，另一方面也增加了阅卷教师评卷难度，使评分标准更难把握。

为了使高考作文评卷更客观公允，实时监控评卷过程中的人为误差成为非常必要的环节。从 1996年起，湖北省高考语文Ⅱ卷（主观题和作文题）评卷点设计了几种较简单的统计分析方法，利用计算机实时监控作文评卷的人为误差，为评卷质检组的复查提供了发现问题的工具，取得了较好的效果。1998 年经过适当改进，有力地支持了 1999年和 2000 年高考语文评卷工作的顺利进行。这种方法，亦可用于学校日常作文评卷，实时监控评卷的人为误差。

1.评分误差监控原理简介

控制高考作文评卷的人为误差，理想的方案应该在较客观一致的评分前提下，获取全省考生的平均参考基准。例如，以全省考生为总体严格随机抽样，然后组织若干权威评卷者事先判卷，获取能代表当年考生总体的平均参考基准和分布状态，并依此来监控后期数以百计评卷教师的评卷过程。

然而，高考评卷有较严格的时间限制，各地市考点试卷送达时间先后不一；再加上高考评卷处理的最小单位是密封的“袋”，不能随机抽样到考号，因而几乎没有在事前采取上述步骤获得参考基准和分布状态的可能性。为此，只能因条件制宜，采取变通的方法，即随机整群抽取不同教师判阅的若干“袋”，用比较评卷结果一致性的方法进行质量监控。这种方法虽然简单，但比较实用。

（1）单因方差分析比较一致性

单因方差分析（F 检验）常用来检验一个变异因素对试验结果的显著性。作为参数检验法的一种，单因方差分析通常需要假设数据为服从正态分布的随机样本和方差齐性。鉴于高考的考号分布已进行过随机化处理，且同一考点的考生均属同一地区。若认为从该考点随机抽取的试卷近似服从上述假设，即可用方差分析法判断教师判卷的人为误差，随时监控评卷的一致性。举例如下：在同一评卷时点，随机抽取已阅试卷 5 袋，每袋试卷约 30 份左右，分别为 5 位教师判分。录入作文分数后，单因方差分析结果如下表所示。

表 1 抽样试卷的统计示例

第四章_方差分析与正交试验设计2