内刊

颐合内刊

当前位置:首页>内刊

从内容效度和表面效度探讨高中英语阅读理解出题的科学性

时间:2020-03-10   访问量:1798

在传统英语语言学习中,阅读能力作为“听、说、读、写”四大要素之一,被认为是衡量掌握语言综合能力的一项重要标志(邹申&冯慎宇,1998),而受到各界的广泛重视。这样的重要地位及其在英语高考分值中所占的巨大比重都意味着测试工作者,英语教师乃至英语练习题的编辑工作者在设计或者审核阅读理解练习题的时候,更加要理清阅读能力和阅读测试的关系,科学有效地设计和出版英语阅读理解题。但是在实际工作中,测试专家往往不能准确地描述他们所测试的能力,英语老师也并不是人人都参加过测试学培训。在这样的情况下为出版把关的英语编辑的审稿工作就显得尤为重要。本文旨在研讨高中英语阅读理解试题的题干和选项,从内容效度和表面效度两个角度分别说明科学的阅读理解题具备的特质,并结合示例进一步帮助英语编辑了解鉴别阅读理解这一题型,明确审稿的方向。

 

在高考英语中,最常见的考察阅读理解的方法便是运用选择题,因而设计好多项选择题对于保证好测试和真实地反映学生的阅读理解能力十分重要。就题干而言,一题科学的阅读理解选择题首先要保证内容效度和表面效度(杨东英&秦学锋,2007)。具体来说内容效度即要求该题测试的是学生的阅读理解能力,而学界对于阅读理解的能力有两种截然不同的观点。以Lunzer Rost为代表的阅读与测试专家认为阅读理解能力是一种单一的综合的不可分割的能力。换句话说,阅读理解能力是无法被进一步细分并分别测试的。而以Weir为首的研究者则持完全相反的观点。Davis经过19441968年两次研究,将阅读理解能力进一步分为:1. 确认词汇意思的能力;2. 获取隐含意义的能力;3. 确定写作技巧与文章态度的能力;4. 寻找问题答案的能力。而他的同事Weir则走得更远。后者在1993年的研究中把阅读能力首先分成ABC三个层次。Weir进一步指出A层是快速阅读能力,包括确认文章特定部分是否与既定需求相关;查找梗概;寻找某一特定信息。B层是仔细阅读,即理解主要意义和重要细节的能力。包括理解主要意义和细节;区分事实和观点,识别作者态度;理解隐藏含义。C层则涵盖被后人称为“门槛”的理解主从句法结构,理解词汇含义等基础理解能力。在这个结构中A层与B层为高层能力,而C层为低层能力,低层能力是读者迁移母语阅读能力和运用高层阅读能力的基础,对高层能力有贡献作用。值得注意的一点是并不是所有的C层能力都能直接作用与高层,因此,冯慎宇在1998年的研究中指出要尽量少出甚至不出关于C层能力的题目。由于支持阅读能力不可分不具有教学和测试的指导意义,这里的分析都建立在Weir1993年的模型之上。以山东省高考英语模拟考试为例,经过调查可得出表格1


image.png

表格1


不难发现模拟考试侧重考查学生查找特定信息的能力和理解主要意义和细节的能力。本次考试没有考查任何C层能力,这一点也余冯慎宇的观点一致。在实际审稿工作中,编辑可以对照Weir的能力框架一一对应找出题目所考察的能力,判断其内容效度是否存在问题。

 

相比较难界定的内容效度,题目的表面效度更容易进行判断。刘润清和韩宝成(1999)指出阅读理解单项选择题题干的表面效度则侧重于题干的形式,即该题目看上去能测试所需要的阅读能力。他们进一步拓展出5条详细的内容:1. 题干与选项和语篇的难度要一致;2. 题干要按照正常的阅读顺序排列,考察信息应当均匀分布在文章中的各个部分;3. 问题答案必须依靠文段提供的信息得出;4. 考察点要明确(他们进一步列举了10种不明确的提问方式,介于篇幅不再赘述。);5. 可交替使用填空式与提问式两种出题方式。熟练运用这5条判断标准,我们快速判断试题的结构形式是否科学。例如以下的阅读题:


1.Which of the following is true according to the passage?

A.The sentence of the first paragraph was first said by Ellen Terry.

B.Joseph OConnor is likely to be from England.

C.Ms. Terry was an English actress at the turn of the 19th and 20th centuries.

D.Ms. Terry had two children during her marriage.


刘与韩认为,这是典型的不正确的题干。该题干以全文未范围,没有明确的考察点,或者可以说在一题内有4个考察点。这种出题方式给与了学生不必要的干扰,变相增加了他们的解题时间。此外,这种题干无法按照正常的阅读习惯顺序排列,因而在高效的测试中显得不那么合适。

 

与题干配套的选择项往往更加侧重表面效度。杨东英和秦学锋(2007)以及黄兰兰(2010)都就选择项的表面效度进行了讨论。他们认为,总的来说,选择项应当1.语言简洁,难度不能超过材料或者题干。2. 长度和结构保持合理。换句话说选项应当长度相当,不能给与学生长度或者结构上的暗示。3. 形式内容正确,无语发语意和逻辑上的错误。4. 避免重叠。5. 答案分布均匀。结合以下一些例子,我们可以更好地理解这5条规律。


1. Which best describes the text structure in the fourth paragraph?

         A. Compare and contrast                                     B. Chronological order

         C. Sequential order                                           D. Problem and solution


以例1为例,选项BC中“Chronological”和“Sequential”两个词的难度明显高于题干和原文。而本题的考察项目并不是学生对于这两个词的理解,而是对文章结构的认识。学生非常有可能虽然能理解文章结构,却因为不认识这两个词而不能正确解题,这是不公平的,该题的信度值得怀疑。因而选项的难度必须得到控制。相较于第一条,选项的结构长度则更容易出现问题,以例2为例,


2. Which is not a reason that chess is a good workout for the mind according to the text?

         A. Good chess players think about what will happen next.

         B. Good chess players take a lot of risks.

         C. Good chess players take their time.

         D. Good chess players use their brains.


这题的正确答案恰巧是最长的A项,观察选项,很容易发现正确项A明显比其他项长,这样当学生失去做该题的线索时,很大概率会猜选结构不同的A项而碰巧选择正确。同样的,若某干扰项的长度明显长于其他项,学生也有很大概率选择这一不同的项,导致错误率上升。这样一方面对于出题的老师或者专家来说,无法辨别有多少学生是理解所以选择的正确/错误项,而又有多少学生是完全瞎猜的。选择题一直以来遭到测试学专家的诟病,很大一部分原因在于这种题目的答案可以猜。即使是四项的选择题,猜对的概率也有25%。如果设计的选项结构不恰当,便无法明确区分先进生与后进生,该题的效度就会下降。此外,结构异常的选项更倾向于考察学生英语能力之外的心理素质而不是阅读理解能力,因此该题信度也值得怀疑。题目选项形式正确这点无须赘述,而要解释第4点,还是要以例1为例。仔细观察不难发现选项BC都有先后关系的意思。选项发生意义重叠,这种情况下该题考察的是对近义词的辨析,而不是原来的对文本结构的分析。而对近义词的分析根据Weir的框架属于尽量不应该测试的C层能力,因而该题的设计仍然存在问题。而第5点均匀分布也比较好理解,意思是题目的考察点不能集中在文章的某一个特定区域,这样阅读全文的意义就不大了。此外,杨东英和秦学锋(2007)还特地指出干扰项也应当来自文本。对比以下两个例题,


3. When will the exhibition about Picasso close?

A. On 23 March. B. On 11 May. C. On 24 June. D. On 5 October.

 

4. According to the passage, where is "the most expensive house" located?

A. on the surface of Mars                    B. Hollywood, CA

C. circling above Earth                      D. New York City


3来自于山东省英语高考模拟卷,该题选项中的每一个时间点在文中都出现过,即使A项是拼凑出来的时间,在原文中也会分别出现这两个数字。而例4A项则不同。选项中的“Mars”未曾在文中出现,这样考察的随意性就会偏大,该题便显得不那么合适。

 

选择题是测试学生阅读理解能力的重要题型,有明显的优势和劣势。出好一题阅读理解选择题必须同时考虑题目的内容效度与表面效度。只有这样,测试题才能真正反映学生的阅读能力;只有这样,才能使选择题为英语测试服务;只有这样才能让英语测试对英语教学产生良好的反拨作用。


上一篇:新课标、新教材、新阅读 ——对小学阅读类图书方向和趋势的一点探究

下一篇:浅谈如何提高图书质量

返回顶部