新课标下中考英语完型填空试题内容效度分析——以重庆市2019~2023年中考英语B卷完型填空试题为例
Analysis of the Content Validity of English Cloze Test in the Middle School Entrance Examination under the New Curriculum Standards—Taking the 2019~2023 Chongqing Middle School Entrance Examination English B Complete Form Test as an Example
摘要: 英语测试是评估学生英语能力水平的关键,也是检测英语教师教学目标是否达到的重要环节。评价英语测试最重要的总体原则是有用性。完型填空作为外语教学和考试中最常见的题型之一,目的在于考查学生的语言综合运用能力。本文以《义务教育英语课程标准(2022修订版)》(下文简称新课标)为基准,选取了2019~2023年重庆市中考英语B卷完型填空试题为研究样本,根据内容效度相关理论和判断依据,对完型填空试题进行内容效度分析,根据分析结果对完型填空的命题提出相应建议。
Abstract: English testing is the key to evaluating students’ English proficiency level and an important link in detecting whether English teachers have achieved their teaching objectives. The most important overall principle for evaluating English tests is usefulness. As one of the most common question types in foreign language teaching and exams, cloze test aims to test students’ comprehensive language proficiency. This article is based on the “New Curriculum Standards for Compulsory Education English (2022 Revised Edition)” (hereinafter referred to as the “New Curriculum Standards”), and selects the 2019 to 2023 Chongqing Middle School Entrance Examination English B-test questions as the research sample. Based on the relevant theories and judgment criteria of content validity, content validity analysis is conducted on the cloze test, and corresponding suggestions are proposed for the cloze test based on the analysis results.
文章引用:陈兰. 新课标下中考英语完型填空试题内容效度分析——以重庆市2019~2023年中考英语B卷完型填空试题为例[J]. 创新教育研究, 2024, 12(12): 133-139. https://doi.org/10.12677/ces.2024.1212870

1. 引言

新课标提出要培养学生的四大核心素养,即语言能力、文化意识、思维品质、学习能力,教师注重“教–学–评”一体化,坚持以评促学、以评促教。中学阶段,教师评价主要是以终结性评价为主,普遍通过考试检测学生是否掌握教学内容。作为教师,不仅要上好课、好上课,也要出好题,好出题。教师既要明白试题命制规则,也要会评估试题质量。九年级学生已经初步具备一定语言知识和技能,在新课标学科阶段目标中,英语课程内容在主题、语篇、语言知识、文化知识、语言技能和学习策略等方面对第三级学生(7~9年级)的要求都有所增加。因此命制试题时,尤其是完型填空,此类试题考查学生语言知识、阅读理解,逻辑推理能力,命题教师或专家应使其发挥有用性,提升学生的语言能力,同时培养学科核心素养。

2. 相关概念界定

分析中考英语完型填空试题的内容效度,首先要厘清相关概念。

2.1. 完型填空

完形填空(Cloze Test)最早出现在20世纪50年代,题目设计为:先将一篇完整短文中的一些单词、短语删去,保留删掉的空白部分,让学生将所删除的部分复原。短文删去单词短语之后,就需要将短文形体空白处复原,使短文形态完整,故称为完形填空[1]

完形填空的理论基础主要来源于格式塔心理学(Gestalt Psychology),即补全心理,大脑有整体识别图形和信息的趋势,强调整体先于部分[2]。后引申到语言学习中,人们对语言越熟悉,越能从整体把握文章,即使在一篇完整的文章中删去某些单词和短语,也不会影响读者对文章信息的获得。

据全国中考来看,完形填空主要有选择式和填空式两种形式,但近五年重庆市中考英语主要采取选择式完型填空。这种完形填空的优点在于,首先,命题较简单,出题人只需按照命题规则挖空,采用客观题的形式方便评分,其次,学生在填补空缺时,有助于学生在语篇理解中学习词汇和语法,锻炼学生的逻辑推理能力。此外,完形填空作为一种具有挑战性的语言测试题型,能够激发学习者的学习兴趣和动力。

完型填空的命题步骤有以下几点:1) 确定文章主题和难度,完形填空的题材应广泛,包括社会生活、人物传记、科技文化、历史地理、政治经济等。体裁可以包括记叙文、说明文、议论文等,以考察学生对不同类型文章的理解能力;2) 设置空格和干扰项,文章首句一般不设空,未设空的文字一定是重要线索,需要填空的词大多是未设空词的再现和重复;3) 检查题目质量,确保试题的信度与效度;4) 预测试验,在正式命题前,可以进行小范围的预测试验,以评估题目的难度和区分度。

2.2. 内容效度

一份试卷的质量,首先需要评价的是该试题的有效程度,即效度(Validity) [3]。效度指试题能够测试出预定要测试内容的程度,即完成预期测试任务的程度[4]。Bachman提出了衡量语言测试质量的重要标准——测试的有用性。效度分为构念效度、内容效度、预测效度、表面效度和方法效度[5]

刘润清提出内容效度(content validity)研究可从以下三个方面进行判断,即① 测试的内容是否和测试目标有关;② 测试内容是否有代表性,是否能全面又充分地体现出需要考查的各方面的内容,是否能设置足量的题目体现所考内容;③ 测试内容是否适合测试对象,即考试内容的难度是否恰当[6]

内容效度的重要性在于测试考试内容是否能反映考试目的,是否可以达到预期考查效果[7]。在新课标下的英语测试中,如果考查到新课标所规定的语言要素和技能,并且满足内容效度的三个标准,则认为这个测试是有效的。因此判断一项测试是否具有内容效度,需看测试内容是否与新课标的测试要求匹配,测试对象是否满足新课标的测试范围。

3. 研究设计

3.1. 研究对象及课程标准的选取

本文选取重庆市2019~2023年中考英语B卷完型填空试题为研究对象,一共5套试题。根据教育部最新颁布的《义务教育课程标准(2022修订)》,从内容效度的三方面对近五年重庆中考英语完型试题进行分析。为了具体评估重庆市中考英语完形填空部分的质量,将对5套试题量化为从文本题材和体裁、词类和句法、文本词汇、文章难度四个方面进行内容效度的分析。

3.2. 数据收集与分析

为了确保数据的科学性,首先,文本题材和体裁类型以课程标准和《语言测试科学与艺术》中列出的7大题材、20种体裁类型和4大文本范畴为参考[8]。接着,考虑到内容效度的第二个方面不好判断,即测试内容的代表性,因此将分析侧重在李筱菊考点层次论中的词法和句法的分布上。李筱菊认为语境分为四种层次:单词(Word)、词组(Phrase)、句子(Sentence)、语篇(Discourse)。考点层次在考试中通常体现在考生需要掌握的范围以及程度。在完型填空中,决定从哪里挖空以及用什么词或短语填补,需要结合语境,联系上下文才能设空,简言之,所设空的词决定于语境中的层次。然后,按照文本词汇以年份进行整理,可以更直观地展示近五年文章长度、生词等变化。除此之外,借助《中国英语能力等级量表》(2018)进行计算,检测文章难度。

4. 结果与讨论

4.1. 测试内容是否和测试目标有关,即相关性

新课标要求三级(7~9年级)学生学习主题包括人与自我、人与社会、人与自然三大范畴。学生要能独立阅读并了解各类读物,即新课程中要求的24个话题。初三学生在阅读材料与内容方面要多样化,积极向上;阅读技巧与理解能力要有更高的要求,不能局限于简单的文本。本文首先从主题范畴、文本题材和体裁进行分析,如表1所示:

Table 1. Statistics on genres and themes of cloze test in the English B-test of Chongqing’s middle school entrance examination from 2019 to 2023

1. 2019~2023年重庆市中考英语B卷完型填空的体裁和题材统计

2019

2020

2021

2022

2023

主题范畴

人与社会

人与社会

人与社会

人与自我

人与自我

题材

外出安全常识

良好的人际交往关系

良好的人际交往关系

动手实践

做人与做事

体裁

议论文

记叙文

记叙文

记叙文

小说

近五年重庆中考英语B卷完型填空,主题范畴集中化,题材生活化,体裁多样化。主题以人与社会和人与自我为主,没有涉及新课标中要求的人与自然。但近年来,随着自然灾害频频暴发,社会各界开始对大自然广泛关注,各大型考试也应将人与自然主题纳入阅读材料中,树立学生正确看待人与自然关系的观念,同时了解自然灾害的防范措施。值得肯定的是,题材上主要偏向日常生活,将考试内容与实际生活联系起来,加强学生的情感体验,从而更好地理解其背后的逻辑和意义,尤其21年展示了外卖送餐员的努力和对女儿的爱以及店主和顾客们的友爱。但体裁上仍有待丰富,主要还是记叙文偏多,说明文以及其他体裁没有涉及。不过在23年,试题体裁改为小说,增加了文章的吸引力,给了学生新的阅读体验,能够引起学生的兴趣。

4.2. 测试内容是否全面典型,即代表性

新课标要求英语测试要考查语法知识,其中包括词法和句法知识。三级(7~9年级)学生要了解词类和句子的结构特征,比如句子的种类、成分、语序及主谓一致。学生要理解并解释语篇中提供的信息;识别和判断语篇中上下文的逻辑关系;阅读短篇小说和简单的报刊文章,整体理解主要内容。学生理解文章首先要对词汇和句子熟悉。因此,检测试题内容的全面性先从语法知识中的词类、短语和句子的全面性作为判断,如表2表3所示:

Table 2. Lexical distribution statistics of the cloze test in the English B-test of Chongqing’s middle school entrance examination from 2019 to 2023

2. 2019~2023年重庆市中考英语B卷完型填空试题的词法分布统计

2019

2020

2021

2022

2023

动词类

4

2

2

3

3

名词类

2

2

2

2

2

形容词类

1

3

2

2

2

代词类

1

1

1

1

1

副词类

0

0

1

0

0

介词类

1

1

1

1

1

连词类

1

1

1

1

1

Table 3. Syntactic analysis of the cloze test in the 2019 to 2023 Chongqing Middle School English Test B

3. 2019~2023年重庆市中考英语B卷完型填空试题的句法分析表

2019

2020

2021

2022

2023

限定性从属子句

14

9

13

5

7

复杂名词短语

19

10

15

11

14

非限定性动词短语

11

9

6

6

5

词类重实词,句法向名短。从表中看出历年中考英语B卷完型填空试题考点侧重于考查动词,要么是动词形式,要么是动词意思。其次为名词、形容词和副词,而代词、介词和连词占较小比例。考点层次分布比较均匀,整体而言,考查词义尤其近义词区别的题目占多数,最低为68%,语法次之,之后固定搭配,虚词最少。总体来说,考点是合理的,但词义考点可以稍减,语法知识(动词的时态、语态、语气,名词的数,代词的格,形容词和副词的比较级、最高级等语法)、功能词(连词、连接代词、连接副词、关系代词、关系副词)和固定搭配可以适当增加比例。

4.3. 测试内容是否适合测试对象,即适配性

4.3.1. 词汇分析

Table 4. Text vocabulary statistics of the cloze test in the English B-test of Chongqing’s middle school entrance examination from 2019 to 2023

4. 2019~2023年重庆市中考英语B卷完型填空试题的文本词汇统计

2019

2020

2021

2022

2023

文章长度/词

235

224

244

241

294

生词率/%

0.43%

2.23%

2.05%

0.41%

1.7%

最长句子/词

24

15

25

15

26

超纲词汇

volume

sulked

Desser towner angerThumbs kindness

tubes

Chuck contentment

Figure 1. The trend of article length in the cloze test of the English B-test for middle school students in Chongqing from 2019 to 2023

1. 2019~2023年重庆市中考英语B卷完型填空试题的文章长度趋势

命制一份恰当的完型填空试题,为使题目达到预期测试目的就必须注意选材和删词[9]。选材和文章长度密切相关,根据历年中考英语B卷真题,完型填空一般在220至300字,字数太少,会导致文本语境不完整,字数太多,学生的阅读时间有限。根据核心素养的培养目标和课程内容六要素的要求,初三学生应掌握1600个单词。短文长度还需要与计划留空的题目联系起来考虑,一般间距不少7词,即最长句子最少8词及以上。因此检测试题内容是否符合测试对象,需分别从文本长度、生词率、最长句子和超纲词汇进行分析[10],如表4所示。

据统计,重庆中考英语B卷完型填空词汇文本字数都控制在230~300之间,符合初三学生阅读的文章长度,总体文本长度呈增长趋势,尤其23年陡增(如图1所示),说明现今中考完型填空对学生英语阅读能力的要求越来越高。更长的文本意味着更复杂的句子结构和更多的上下文信息,考生需要更强的阅读理解能力、逻辑推理能力和语言运用能力来准确完成填空。

4.3.2. 难度分析

根据《中国英语能力等级量表》(2018),中考英语难度属于三级,数值在3~4之间,如图2所示。完形填空作为最常见语言测试题型之一,其难度往往由多个因素综合决定,以下从词汇难度、句法难度、文本难度和易读性对完形填空进行分析,数据见表5

Figure 2. Report on the difficulty level of Chinese English proficiency

2. 中国英语能力难度等级报告图

Table 5. Difficulty analysis of cloze test in English B of Chongqing High School Entrance Examination from 2019 to 2023

5. 2019~2023年重庆市中考英语B卷完型填空试题难度分析

2019

2020

2021

2022

2023

词汇难度

3.15

3.32

3.89

3.21

3.58

句法难度

3.94

3.50

3.98

3.06

3.65

文本难度

3.79

3.61

3.94

3.03

3.67

*参照《中国英语能力等级量表》(2018)。

以上表格词汇难度、句法难度、文本难度数据来自于languagedata网站分析。新课标要求,初三学生各地根据实际情况在三级词汇的基础上可以增加100~300的生词。由表5可知,2021年难度最大,2019年难度最小,但从整体趋势来看,近五年完型填空试题词汇难度均正常。并没有一个明显的趋势看出是单调递增还是单调递减。新课标要求初中学生掌握简单句、并列复合句和主从复合句。由表5可知近五年的完型填空试题句法难度总体偏高,除了2022年最为简单。由此说明中考关注的不再是简单的语法知识,更加侧重考查学生的阅读理解能力,基于语境补全文章。文本难度在外国的研究中都称之为易读度(Readability)也称可读性或易读性,而易读度往往与句法难度相关,如果一篇文章句子结构复杂,包含多个从句,那么对学生而言句法难度大,文本难度也大。由表5可知,整体文本难度在中考范围内。

综上所述,完形填空的难度是由多个因素共同决定的。为了应对完形填空,考生可以通过提高词汇量、掌握语法规则、加强上下文理解和逻辑推理能力、熟悉干扰项设置规律以及掌握有效的答题技巧等方式来提高自己的答题能力。同时,出题者也应该根据考生的实际情况和测试目的来合理设置完形填空的难度和考察重点。

5. 结语

本研究发现,该五套试卷的完形填空在一定程度上较好地考查了被测者综合语言的运用能力,基本符合《新课标》提出的培养被测者综合语言运用能力的要求。在对重庆市2019~2023年中考英语B卷完型填空试题的内容效度进行深入分析后,我们可知道:近五年B卷试题在内容效度方面展现出了较高的匹配度,充分体现了新课标对中考英语完型填空部分的要求。试题在题材和体裁、词法和句法、词汇量、词汇难度、句法难度、文本难度的选择上,都紧密贴合了新课程标准,确保了试题的针对性和有效性。同时,试题设计合理,空格设置广泛且考点分布均匀,能够全面检测学生的阅读理解、词汇运用、语法掌握和逻辑推理等能力。此外,试题的难度和区分度适中,既保证了试题的挑战性,又考虑到了学生的实际情况,有利于准确评估学生的英语水平。这种设计有助于引导教师在教学过程中更加注重学生综合能力的培养,促进学生英语素养的全面提升。

总而言之,重庆市2019~2023年中考英语B卷完型填空试题在内容效度方面具有较高的可信度和有效性,为中考英语完型填空部分的命题提供了有益的参考和借鉴。但是,完型填空的题型不够多样化,除了传统的四选一完型填空外,还可以尝试其他题型,如根据首字母填空、根据语境填空等,多样化的题型可以更全面地考察学生的语言能力和应变能力。其次选材应紧跟时事热点,可以是故事、新闻报道、科普文章等,从而达到考中学,学中考的目的,这样不仅能激起学生对英语的学习热情,也能起到良好的教育意义。

参考文献

[1] 武尊民. 英语测试的理论与实践[M]. 北京: 外语教学与研究出版社, 2002.
[2] Wilson, K. (1999) The MIT Encyclopedia of the Cognitive Sciences. The MIT Press.
[3] 郑龙凤. 高中学业水平测试英语完形填空内容效度的分析[D]: [硕士学位论文]. 重庆: 重庆师范大学, 2015.
[4] Bachman, L.F. and Palmer, A.S. (1996) Language Testing in Practice: Designing and Developing Useful Language Tests. Oxford University Press.
[5] Bachman, L.F. (1990) Fundamental Considerations in Language Testing. Oxford University Press.
[6] 刘润清, 韩宝成. 语言测试和它的方法(修订版) [M]. 北京: 外语教学与研究出版社, 2000.
[7] 邸颖娜. 语言测试中的效度问题[J]. 职业技术, 2009(7): 86.
[8] 李筱菊. 语言测试科学与艺术[M]. 长沙: 湖南教育出版社, 1997.
[9] 舒运祥. 外语测试的理论与方法[M]. 上海: 世界图书出版公司, 1999.
[10] 郑玲晓, 朱嫣然. 基于语料库的中考英语完形填空测试内容效度研究——以宁波市2012-2019年中考英语完形填空试题为例[J]. 教育测量与评价, 2019(10): 49-55.