大学英语成就测试的公平性探究——阅读测试的专业背景DIF检验
怀孕七个月注意事项-高中生周记
大学英语成就测试的公平性探究
贺满足
:
2018
年第
5
期
大学英语成就测试的公平性探究
*
——阅读测试的专业背景DIF检验
贺满足
摘 要:DIF分析是确保教育考试公平性及效度的重要手段。本研究采用MH法、LR
法对大学英语成就测
试阅读试卷进行专业背景DIF检验,MH法未检出明显含DIF的试题,LR法检
出1个含非一致性DIF的试题,
说明LR法比MH法更敏感,检测力更高。含非一致性DIF的试题在
内容、形式上不存在偏差,其出现DIF很可
能由不同组间的区分度差异引起。总体上,该套试卷阅读部
分对不同专业的学生不存在偏差,具有公平性,命题
比较成功。
关键字:考试公平性;项目功能
差异;专业背景;MH法;LR法
大学英语成就考试是检查英语课堂教学质量的
主要手段,也是
学生参与评先评优的依据之一,其成绩
会对学生的学习和生活产生较大影响,需具备公平性
以体
现公正。大学英语课程面向的是不同专业的学生,
那么考试试题本身是否公平?考试内容及形式是否有<
br>利于某些专业的学生,而对其他专业的学生不利呢?
这些问题值得我们去研究。
一、相关
研究
项目功能差异(differential item functioning, 简称
DIF)检验是指将被试按人口学特征(如性别、种族、
生源地、经济地位)分为两个组——目标组(r
eference
group)和参照组(focal group),在控制组别能力之后,分析题目在不同组表现出的不同统计特性。具有相同能
力的两组考生在某题上的正确作答概率不一致时
,我
们认为该题具有DIF
[1]
。一般把在题目上可能不利的
那组被试当作
目标组, 把作为对照的那组被试称为参
照组。当考生背景多样化时,DIF检验就变得很有必
要,因为DIF的出现,表明与组别相关的因素影响了考
生作答,从而威胁到考试的公平性。
语
言测试领域,研究者对大规模考试进行DIF分
析,按照性别、种族、文化背景母语将考生进行分组,<
br>发现具有相同水平的不同组别的考生在某些试题上的
作答不一样。这些与测试构念无关的因素导致
考生获
得系统性高分或低分, 从而影响测试结果的准确解释
和使用, 降低测试效度
[2]
, 威胁考试的公平性。1986年,
美国ETS (Educational Tes
ting Service)规定, 试题开发
作者简介:贺满足,女,湖南衡阳人,湖南第一师范学院
外国语学院讲师,广东外语外贸大学博士生,主要研究方向为语言测
试 (广州 510420)
*基金项目:本文系湖南省教育厅一般项目 “公平视域下英语学业考试的效度对英语习得的影响研究”(课题
编号:15C0285) 的
研究成果。
· 51 ·