Analysis of the Design of Multiple Choice Questions in English Reading Test in Junior High School
Multiple choice questions are commonly used in English reading in China, whose design will influence the reliability and validity of reading test and the test of students’ real reading ability. Through the collection and analysis of English reading test papers between 2015~2023 of Senior High School Entrance Examination in Chongqing, the writer finds such shortcomings: stems merely copy the original text; the focus is not clear; common sense problems; the length of stems; wrong stems; wrong options and the uneven proportion of fill-in-the-blank stems and question-and- answer stems. Accordingly, the writer discusses and puts forward suggestions to help improve the scientific nature of setting questions.
Junior High School
首先,在英语测试中多项选择题(Multiple Choice),简称MC题型,是一种被广泛运用的题型。从国际性考试TOEFL、IELTS到国内的中考、高考、CET-4/6、TEM-4/8、研究生入学考试等都大量采用这一题型
多项选择题最初创立于心理测试。19世纪20年代初,以多项选择题型和是非题型为代表的客观测试开始在美国教育界包括语言学科中使用,并迅速获得承认;30年代心理计量学的发展进一步促进了客观测试手段的应用;到50年代,客观语言测试已经在美国教育性语言测试中占主导地位;在60年代,许多结构主义语言学家和教育心理学家开始研究语言测试问题,并用测量学的方法计算测试的信度和效度。八九十年代,多项选择题在交际测试中渐成主流
以Lado为代表的结构主义家认为,既然对语言要一个层次一个层次的研究,那么在测试中每次也只能衡量语言的一个部分,而且每次只能衡量一种语言技能,结果产生了每次只测一种语言技能,每题只测一个语言部分的多项选择题。Alderson (2000)指出,回答MC题型的能力是一种独立的能力,与阅读能力是截然不同的。学生可能通过排除干扰项或通过对问题结构的逻辑分析来回答问题
张颖(1988)认为,多项选择题只能测试学生的语言接受能力,如读和听,而不能测试学生的语言运用能力,如说和写其次,多项选择题所衡量的甚至只是考生的推理能力或猜测能力
从国内外学者研究可知,MC题型的设计会极大的影响阅读测试的效度,甚至会影响使用者的真实阅读能力,其优势和不足在现今的英语试卷中仍存在。因此,要正确认识MC题型的弊端,加强对该题型的科学化和准确化设计,而不是要求学生掌握所谓的“答题技巧”来猜题。
在标准测试中,多项选择题一般是由三部分组成的,分别是:题干(stem)、答案(key)和干扰项(distractors),后两者叫选择项(options),通常一个题干搭配四个选择项。
参考武尊民教授《英语测试的理论与实践》(2002)和刘润清,韩宝成教授《语言测试与它的方法(修订版)》(2002)这两本书中,对英语阅读测试中多项选择题命题的基本原则的描述,再结合现实情况,笔者将本文的多项选择题的评价标准综合归纳如下
本文收集了重庆市中考英语试卷2015年~2023年共18套试卷,其中A卷9套,B卷9套;2015~2018年每卷有4篇阅读,即A、B卷总计32篇。2018年改革,从2019年开始增加了1篇阅读,即2019~2023年A、B卷总计50篇。因此,本次分析采纳82篇阅读文本,共310个问题,共1240个选择项。结合上述标准,将试卷中发现的问题进行归类、统计和分析。
笔者通过对重庆英语中考A卷和B卷的分析,将从以下三方面进行详细讨论:
通过对中考A卷和B卷的分析,笔者发现这82篇英语阅读测验的多项选择题的设计主要存在:题干照抄原文、考点不明确、常识性问题、题干长度、题干有误和选择项有误这六类问题,共31个选项。如
年份 |
选项 |
问题 |
2015 |
A篇第51题 |
题干照搬原文 |
B篇第55题 |
题干照搬原文 |
|
C篇第60题 |
考点不明确 |
|
2016 |
C篇第60题 |
考点不明确 |
A篇第51题 |
常识性问题 |
|
2017 |
A篇第49题 |
题干照搬原文 |
D篇第60题 |
题干长度 |
|
D篇第63题 |
题干有误 |
|
2018 |
B篇第50题 |
常识性问题 |
C篇第56题 |
考点不明确 |
|
2019 |
A篇第41题 |
题干照搬原文 |
2021 |
D篇第33题 |
题干长度 |
2022 |
E篇第36题 |
考点不明确 |
2023 |
B篇第25题 |
常识性问题 |
年份 |
选项 |
问题 |
2015 |
A篇第53题 |
题干照搬原文 |
A篇第54题 |
题干照搬原文 |
|
D篇第65题 |
考点不明确 |
|
C篇第59题 |
题干长度 |
|
2016 |
C篇第58题 |
题干长度 |
C篇第60题 |
考点不明确 |
|
C篇第61题 |
考点不明确 |
|
2017 |
A篇第50题 |
题干照搬原文 |
C篇第58题 |
考点不明确 |
|
C篇第59题 |
题干有误 |
|
2018 |
B篇第52题 |
选择项有误 |
2019 |
A篇第41题 |
题干照搬原文 |
A篇第43题 |
选择项有误 |
|
2020 |
D篇第34题 |
选择项有误 |
D篇第34题 |
考点不明确 |
|
2023 |
B篇第25题 |
常识性问题 |
C篇第30题 |
考点不明确 |
将这31个有问题的题干和选项进行统计,如
A. in 1949B. in 1965C. in 1975D. in 2014
A. drinkingB. smokingC. eating foodD. selling goods
A. cloud B. paper C. historyD. photo
A. in a hotel B. in a police office C. in a parkD. in her friend’s home
A. favorite violin B. favorite toys C. old booksD. old clothes
A. Asia B. ChinaC. RussiaD. Africa
A. In the river B. in the snow C. along the seaside D. in the mountains
A. teacherB. doctor C. writer D. farmer
所谓考点明确,是指题目的设计要以短文的信息点为依据,并且在题干中一定要点出来。题干中没有焦点(focus),考点不明确,是题目设计中最忌讳的,也是最常犯错误的地方
We learn form the passage that _______.
Which of the following is NOT true/ true?
The passage tells us that _______.
According to the passage, _______.
It is implied that _________.
It can be concluded that ________.
It can be inferred that __________.
It is true that _____________.
The author says that ______.
The author tries to tell us that _______.
From the second paragraph we can see _______.
这样的题干的焦点没有讲清楚,还有题干只是给一个主语,接下来就是划线,等于还是没有焦点,过于宽泛。题干光秃秃的,选项内容不集中,不知道为的是什么。这样的题干叫空题干,在设计题目时应该避免
A. Australian B. ChineseC. EnglishD. American
A. watching TVB. watering flowersC. walking dogsD. playing with phones
A. Short tailsB. Big teethC. Cold bodiesD. Big head
A. FishB. Chicken C. BambooD. Birds
上列题均属于常识题,就算学生没有读文章,凭借常识,也可以把题目做对,没有达到检验学生阅读能力的目的,还降低了试题的测试效度。所以,这样的题属于无效问题,在出题时应该规避。
A. in her own diaryB. in a letter to her friend C. on a social media D. on the wall of the library
A. alive B. brightC. luckyD. colorful
A. in Mexico B. in Africa C. in Korea D. in China
A. sad B. hungryC. happyD. cold
上述题干相对稍长,虽然大部分选取的是文中的原句,但可以在原有句型的基础上加以变化。这样的题干不简洁,过于冗长,还镶嵌从句和多个动词,学生还需要将题干看懂才能做题。如上述2015年B卷C篇的第59题,该题干有know的宾语从句,从句里面是take的动名词形式作主语,后面有be动词,of介词后面的动词ing形式。整个结构看起来相对复杂,题干应该做到措施简洁,不含生词,句法结构难度与目标考生程度相当,以保证不给学生造成障碍。题干与选项的语言难度应一致,试题与语篇的难度也应一致。
以上两题都是考的主旨大意题,借助“want to do”来表达,从句意上可以读懂。但是“want to do”的主语通常是人;如果主语是物,通常需要用被动语态来表达,或者通过其他方式来表达这个意思,如:This passage is aimed at/ the purpose of the passage…
A. The British should improve their health only this month
A. The man in the shop only liked his books
A. waste does harm only to the environment
上述多项选择题的干扰项都含有only这一明显的否定词,学生自然不会选择这些选项。如此,这些干扰项就没有起到干扰作用,学生就可以直接从剩下的三个选择项中选,阅读的效度降低了。
对A、B卷的310个英语阅读问题进行归类,其中,填空式题干有241个,问答式题干有69个。如
年份 |
填空式题干 |
问答式题干 |
总计 |
||
填空式 |
问答式 |
题项 |
|||
2015A |
13 |
2 (第60题,61题) |
27 |
3 |
30 |
2015B |
14 |
1 (第65题) |
|||
2016A |
14 |
1 (第65题) |
27 |
3 |
30 |
2016B |
13 |
2 (第60,64题) |
|||
2017A |
13 |
2 (第57,59题) |
26 |
4 |
30 |
2017B |
13 |
2 (第58,62题) |
|||
2018A |
13 |
2 (第51,56题) |
25 |
5 |
30 |
2018B |
12 |
3 (第54,58,59题) |
|||
2019A |
18 |
1 (第53题) |
36 |
2 |
38 |
2019B |
18 |
1 (第55题) |
|||
2020A |
17 |
2 (第26,31题) |
35 |
3 |
38 |
2020B |
18 |
1 (第37题) |
|||
2021A |
15 |
4 (第25,28,34,39题) |
33 |
5 |
38 |
2021B |
18 |
1 (第34题) |
|||
2022A |
17 |
2 (第29,31题) |
30 |
8 |
38 |
2022B |
13 |
6 (第24,27,31,32,36,39题) |
|||
2023A |
0 |
19 |
2 |
36 |
38 |
2023B |
2 |
17 (第21,22,23,24,25,28,29,30,31,32,33,34,35,36,37,38,39题) |
对各年份填空式和问答式题干的不同占比,笔者对中考英语试卷再次分析,发现,2015~2022年的多项选择题普遍采用照搬、依赖阅读文本的某个特定信息的挖空方式来提问,而2023年的多项选择题则普遍是用特殊疑问词来引导的特殊疑问句提问,阅读的难度和水平有了大幅度的提升,因为学生不能像往年一样,仅仅只是根据题干中画横线的地方进行定位,查找信息可得,而是要对整个语篇有个大体的了解和把握。同时,摆脱“填坑”的做题方式对于学生主观答题意识和综合阅读能力的训练也是具有更好的帮助。但是,2023年的问答式题目过多,在一定程度上也有给学生的阅读带来一定的影响,对于阅读水平低的学生,没有相应的填空式问题来满足他们的阅读需求,可能在自信心方面造成影响,从而形成阅读障碍。因此,中考英语阅读的多项选择题应该遵循填空式和问答式题目相结合的形式,协调配比,既避免题目设计的单一和呆板,也能让学生适应不同的题型来答题。
从上述分析可得:其一,重庆中考英语阅读的多项选择题基本是符合命题原则和规律的,题型依赖于原文,每个选择项的长度也遵循命题原则,不存在三短一长或三长一短的情况;其二,这些多项选择题也存在一定程度的不足,问题主要是集中于改革前的2015~2018年,改革后的题型相对更加严谨和规范,类型也更加多样,问题数量也有所下降,命题质量有所提升;其三,重庆中考英语的填空式和问答式题干的比例分配不均,2015年~2022年多以填空式题目为主,2023年则明显以问答式题目为主,应该协调两类题型的占比,避免呆板和封闭,尽量满足不同学生的作答需求。综上所述,历年来,英语阅读的多项选择题的命题发展之路逐渐成熟和完整,但仍需坚持科学性和创新性的统一,客观性和主观性的统一,不断完善和规范。