2004年2月现代外语(季刊)Febnmry20O4第27卷第1期ModernForeignLanguages(Quarterly)Vo1．27No．1大学英语四、六级考试分数的机助百分位等值研究·上海交通大学朱正才杨惠中提要：本文试图在计算机帮助下．运用数据平滑和插值计算方法，对考试分数作机助的百分位等值．以建立两次考分之间不间断的对应关系。本文的基本思路是：先用数学方法直接对两个考试分数的百分位曲线作平滑拟合处理，并对异常的点作特别的修正．对修正之处要征询专家意见并评价其合理性。第二步，建立分数等值转换表，并在必要时作插值计算，使两个考试分数之间能建立起精确的转换关系。本研究对目前考试领域中普遍存在的主、客观题分数之间的等值问题，提出了具有重要参考价值的计算机化解决方案。关键词：百分位等值、平滑、插值【中图分类号】H310．42【文献标识码】A【文章编号】1003-6105(2004)02-0070-071．前言凡标准参照测验，都要保证其通过标准的稳定性。因此，大学英语四、六级考试对各种分数等值方法的进行了广泛的研究。目前，在大学英语四、六级考试的选择题部分采用的就是项目反应理论的真分数等值方法(朱正才等2003)。但从1997年开始，全国大学英语四、六级考试委员会推出了一系列改革措施，其核心是加强对学生英语语言交际能力的测量，尤其是对听、说、读、写等实际语言应用能力的测量。在试卷构成上，增加了主观性很强的产出性题型。如听力测试中的“复合式听写”，要求学生具有一定的边听英语讲座边用英语记笔记的能力，“翻译”题则对阅读理解的深度和准确性提出了更高的要求，“简答题”同时对阅读和表达能力进行综合的考查。这样大学英语四、六级考试卷中主观性试题已占到了30％左右的比重，这给分数等值工作带来了新的研究课题。对这些新题型与原来相对应的选择题之间的分数等值，经典的百分位等值是最可靠的等值方法。主要的考虑是：(1)新题型采用多级评分，而项目反应理论的多级评分模型目前尚不成熟，因此也难以开发出基于项目反应理论(roT)的可靠等值模型；(2)新题型所测的考生语言能力结构比原来的选择题更复杂，两者的成绩分布存在差异，不适合用线性等值方法；(3)百分位等值方法对要等值的成绩总体分布没有特别的要求，而且大学英语四、六级考试一直采用大样本的对比考试来收集等值数据．因此使用百分位等值时误差很小，应该是目前这种情况下最合适的等值方法。经典的百分位等值理论认为：两个平行并且信度相等的测验分数，如果它们在各自考生总体值中的百分位置相等，就可以认为是等值的。实际操作时的一般做法是：随机抽样两个考生组Group和Group2，分别实施两个考试Testl和Test2(称“随机等组设计”)。计算TesH‘本研究得到了全国大学英语四、六级考试委员会的大力支持，并使用了大学英语四、六级考试数据，特此致谢J大学英语四、六级考试分数的机助百分位等值研究71和Tet2在组Group和Group2上的相对累积频数(即百分位)，则两个组中同一个百分位所对应的Testl和Test2的两个原始分数(譬如说记为和se)就是等值的。如果不作插值计算的话，j和经常难以建立连续的对应关系。因此，传统的做法是将等值区域划分为大约30+小的区间，然后绘制出一个百分位转换曲线，并且据此建立两个考试分数间的等值关系。显然，即使是使用概率纸作图，其精确度也是很有限的。本文试图在计算机帮助下，运用数据平滑和插值(Datasmoothingandinterpolation)计算方法，对考试分数作机助的百分位等值，以建立两次考试分数之间不间断的对应关系。本文的基本思路是：先用数学方法直接对两个考试分数的百分位曲线作平滑拟合处理(有些研究是对频数分布曲线作平滑处理，Kolen&Jarjoura1987；Kolen&Brennan1995)，对异常的点作特别的修正，并保留原来的曲线痕迹，对修正之处，要征询专家意见并评价其合理性。评价的总原则是平滑后的曲线应更好地体现相应被试的真实能力分布的特征。第二步，建立分数等值转换表，并在必要时作插值计算，使两个考试分数之间能建立起精确的转换关系。本研究使用了大学英语四级考试听力理解部分的一次对比考数据为样本，在计算机上获得了一个比较满意的百分位等值转换结果。2．研究设计本研究选取了785名二年级本科考生为被试。他们都参加了1997年6月的大学英语四级考试(记为76)，显然这是一个较大的样本2o为了实现分数的等值，在大学英语四级考试前一周，这批学生还参加了一个专门组织的等值测试(记为1906)s，抽取这批考生在两次考试中的听力理解测试成