英语线上诊断性测试的设计与实施

    贾添琦 黄丽燕

    

    

    

    摘 要:诊断性测试旨在发现学习者的具体优势与不足,对过程性促学与教学的改进具有重要作用。新冠肺炎疫情的发生为教学带来了一定的挑战,也对线上教学提出了新的要求。如何更有效地开展线上诊断、发挥线上诊断测试的积极作用逐渐成为众多教师所关心的问题。本文首先梳理已有文献中关于诊断性测试的重要观点,随后基于有关观点对线上诊断性测试设计的原则与方法展开讨论,最后结合一个线上阅读诊断性测试的案例,对线上诊断性测试的设计与实施进行评述,以期为线上诊断性测试的有效开展提供参考。

    关键词:诊断性测试;线上诊断;阅读诊断;认知思维能力诊断引言

    “诊断”一词源于医学领域,最初指对疾病的判断与分类。Bloom(1956)首次将“诊断”这一概念正式引入教育领域。诊断性测试(Diagnostic testing or Diagnostic assessment)是一种用于发现学习者具体优势与不足的测试形式,也是教师为了促进学习者下一阶段的学习而采取的一种有效教学手段(ALTE,1998)。诊断性测试对过程性促学和教学的改进具有重要作用,其相关研究及测试工具开发一直得到教育工作者的重视。近年来,随着计算机教育技术的迅猛发展,线上诊断性测试的应用取得了长足进步。自新冠肺炎疫情发生以来,线上教学成为一种重要的教学形式。众多教师在实际线上教学中面临着一系列的问题,其中较为突出的问题之一就是如何准确把握学生的学习情况。线上诊断测试的有效性问题也随之受到学界和一线教师的关注。如何顺应形势,利用线上教学的优势,进一步优化线上诊断性测试的设计,以评促学,有待教育同行们深入探讨。诊断性测试的功能、分类与特点

    Hughes (1989)认为,诊断性测试的主要目的在于发现学生的弱点,以证明教师有开展下一步教学的必要性。换句话说,诊断性测试能够发现教学中存在的问题,问题的存在就意味着教师需要进一步开展教学活动去解决问题。ALTE(1998)指出,分析诊断性测试的结果有助于教师发现学生学习中存在的问题,并通过分析问题产生的原因反思自身教学,进而促进教师更好地把握下一阶段的教学方法、教学策略以及教学重点。同时,测试的结果也有助于学生及时了解自身不足,从而明确今后学习的侧重点。此外,李筱菊(1997)认为,诊断性测试有助于学生进行阶段性的自我评估。由于診断性测试一般不划分及格线,其结果不会对学生产生直接影响,因此在一定程度上降低了学生对考试的焦虑感,减少了测试的负面反拨效应。李筱菊还强调了诊断性测试的甄别功能,认为诊断性测试的目的是区分受试者的特点,以便在教学中最大程度地因材施教。总而言之,虽然不同学者对诊断性测试功能的看法不同,但这些观点具有一定的共性。诊断性测试的功能大致可以从以下两个角度进行概括:从教师角度而言,诊断性测试能够帮助教师及时发现学生学习过程中存在的问题。通过分析诊断性测试的结果,教师能够为学生提供改进意见,也能促进其自身改进教学策略、调整教学活动。从学生的角度看,诊断性测试所提供的反馈结果有助于学生意识到自身的优势所在,在一定程度上能够提升学生的自信心,从而进一步提升其学习兴趣。此外,反馈结果也有助于学生发现自身的不足,为日后调整学习策略、学习重点以及学习状态提供方向指导。

    诊断性测试的分类可以为我们提供一些设计该类测试的思路,如考查目标的确定,测试媒介、测试主体、测试时间的选用等。根据不同的标准,诊断性测试可以分为不同的类型,使用者可以按照实际需求以及现有条件采取不同的形式。1. 从测试目的的角度看,诊断性测试可以分为能力测试和完成性测试。2. 从测试内容的角度看,诊断性测试可以分为分项诊断性测试和综合性诊断测试。分项诊断性测试指对单一项目的诊断,例如检测词汇掌握情况;综合性诊断测试则指对多个项目进行的诊断,如同时检测学生词汇掌握情况与语言流利度。也有学者(莫运国,2002)认为,单项诊断性测试是指从单个角度对单个项目进行的测试,例如从词汇量这一角度去诊断学生对所学词汇的掌握情况。而综合性诊断测试则是指从多个角度对单个项目进行的测试,例如从词汇量、词义辨析、词汇运用等角度去诊断学生对所学词汇的掌握情况。分项诊断性测试覆盖范围较窄,测试内容有较强的针对性;而综合性诊断测试则与之相反,所覆盖的内容较广,且注重评估学生的综合能力(桂诗春,1986)。3. 从技术和媒体的使用角度看,诊断性测试可以分为书面诊断性测试和计算机诊断性测试。4. 从测试人员的角度来看,诊断性测试可以分为教师诊断性测试与学生的自我诊断性测试。5. 从测试规模的角度看,诊断性测试可以分为大规模诊断性测试和个人诊断性测试。该分类下的“大规模”是相对于“个人”而言的大规模,一般指以整个班级为单位进行的测试(因此也可称之为群体诊断),而非一般意义上考生数量众多且跨地区的大规模测试。6. 从时间的角度看,诊断性测试可以分为课堂前、课堂中、课堂后的诊断性测试。

    诊断性测试有其独特之处。从测试时间看,它是对学习过程的检测,关注学习过程中的教与学,旨在明确学习者在学习过程中是否存在一定困难,进而对教与学提出改进方案。其他类型的测试如成绩测试(Achievement test),是对学习效果的检测,关注学习结果。从测试目标看,Alderson等(2014)指出,相较于发现学习者的强项所在,诊断性测试更倾向于发现学生学习过程中的弱项环节。诊断性测试的核心在于“诊断”二字,其主要目的是发现问题,并为问题的解决提供方向指导。从测试内容看,Alderson(2000)指出成绩测试(Achievement test)更关注所考查知识的广度,而诊断性测试则侧重对某一具体知识点考查的深度(Alderson,2005)。从测试反馈看,诊断性测试的目的是及时获取教学反馈信息,强调反馈的及时性(桂诗春,1986)。从测试规模看,诊断性测试规模较小,主要在课堂上由教师主导开展。线上诊断性测试的应用现状

    线上诊断即在线上进行的诊断性测试。该诊断方式基于互联网技术,借助电脑、平板、智能手机等电子设备进行。冯宝鑫和马炳军(2019)指出不同于传统课堂面对面诊断,线上诊断的信息呈现方式具有多元化的特点,其内容可以借助圖片、音频、视频等多媒体手段呈现。此外,线上诊断可借助软件等工具同时处理大量数据,实现线上自动评分。线上诊断性测试的具体方式丰富多样,教师可以根据教学目的、学生的特点和需求、可利用的资源等进行选择。目前常用的线上诊断方式包括基于计算机的线上诊断性测试(Computer-based diagnostic assessment)。Alderson(2005)在书中对DIALANG进行了系统的介绍。例如, DIALANG是一种基于计算机、覆盖了14种欧洲地区语言的在线诊断性语言测试系统。该系统旨在从阅读、听力、写作、语法以及词汇五个维度测试英语为二语的学习者的英语语言水平。此外,樊剑(2014)开发了一套基于智能移动设备的在线诊断的软件——E化教学系统。该系统由自助检测和智能组卷两部分组成。在自助检测系统下,学生可以获得在线测试、反馈、诊断、评价与补救的一站式体验,这些信息有助于学生及时了解自身的优势与不足。冯宝鑫和马炳军(2019)表示,目前智能手机、平板在师生中普及率非常高,已经具备了作为诊断工具的基本条件,专门用于诊断性测试的应用软件也越来越多。例如,教师可以使用Android Studio编制诊断性试题,并在需要采取诊断措施的教学环节中通过网络发布这些试题。在中小学英语教学中,平板辅助教学的现象已经越来越普遍。例如,教师在教学过程中要求学生完成平板上预先设置的任务,检测学生对所教授知识点的掌握情况。教师可以通过后台监测学生的作答进度,并能够在第一时间获得学生的作答情况,掌握学生的优势与短板。随后,教师根据反馈信息,即刻在班级范围内对某些学生掌握不够熟练的知识点着重进行讲解。另外,基于在线学习平台的诊断性测试也得到广泛应用,如陈明洁(2012)开发的适用于高职学生的自主学习平台。此外,专门用于诊断高中生英语能力的在线网络教学资源平台“优诊学”(Udig),通过“在线测试、诊断报告、专练推送”的诊学模式,诊断和评价学生学习状况,为教师和学生提供反馈指导。“高分说”平台的线上英语阅读课程“悦读培思”,就是以阅读活动为载体,以读后诊断作为促进学生思维能力发展的途径的。

    总之,目前线上诊断性测试既有针对综合英语运用能力测评的学习平台,也有专门针对某类能力发展、以评促学的线上课程,基本上凸显了过程性、互动性、个性化诊断与反馈等特点。线上诊断性测试的设计与实施

    线上诊断性测试的设计与日常教学密切相关,大致可以分为以下四个环节。

    1.确定诊断目标

    教师可根据教学目标和学生的实际情况,确定教学的重点、难点。重点即学生应理解、掌握的内容,难点则是依据学生的学习特点和认知发展水平确定的相对较难理解和掌握的内容。诊断性测试可围绕教学的重点和难点开展。为了确保教学的有效性,教师可通过过程性诊断测试判断学生的学习状况,发现教学方法和手段的不足,并根据学生情况进行调整,以优化教学效果。如:目前在阅读教学中,思维品质的培养是教学的重点和难点。思维能力包括上下文推断、归纳能力和比较、评价人物的能力等,教师可把各类思维能力的提升进行合理规划,在课堂教学中对学生进行相关训练,并通过诊断性测试了解学生思维发展的状态,逐步推进教学。诊断性测试的考查目标不求全面,但须凸显针对性。

    

    2.设计诊断任务

    诊断性测试任务大体上可以分为选择性反馈(Selected-responses tasks)和建构性反馈(Constructive-responses tasks)。前者一般指客观题,如选择题、配对题、排序题等;后者一般指主观题,学生需要根据题目要求产出文字、表达观点想法等,如表格填写题、问答题、书面表达题等。以语法测试为例,常用的题型(Purpura,2004)见表1。

    如表1所示,选择性反馈可使用选择、正误判断、语法改错等题型。例如Noticing activities,要求学生阅读语段并标出所学习的语法现象,如一般过去时、定语从句等,从而有助于判断学生对目标语法的掌握程度。限制性输出(Limited-production tasks)属于过渡性、半控制性产出题型,为完全产出作好准备。如填空题(Gap-filling activities)、补全对话题(Dialogue completion activities)等,是在确定诊断目标后,在文段中针对目标语法进行挖空,要求学生填写。拓展性输出(Extended-production tasks)较为开放,适用于诊断学生的综合语言运用能力、思维品质、学习能力等,包括摘要和短文写作、问题解决、决策等。

    除了根据测试目标选择合适的题型外,试题编制过程中还应遵循一些测试学中的命题原则。以编制选择题为例,由于命题人在选题或改编时必须考虑考点、题干和选项的正确性和合理性等,因此可参考以下原则:

    (1)题目要明确且最好聚焦一个考点,否则教师无法从学生的得分判断其对具体知识或技能的掌握情况。

    (2)题干能提供语境,内容上不存在明显的偏颇,最大限度地保证考试的公平性。

    (3)题干语言要正确、地道、得体、简洁,可参考词典或较高质量的正式出版物。

    (4)选项内容要符合常理,且不宜为学生已知的一般常识。

    (5)同一题目中各选项在长度、结构、类属(如词性、褒贬义)等方面保持相似性。

    (6)同一题目中的选项中不要出现一组反义词或反义词组。

    (7)用于填空的选项,放入题干中应符合语法规则。

    (8)选项中相同的内容应放在题干内。

    (9)整合全卷答案時,注意正确项不要集中在某选项,如正确项全部集中在 C 项。正确项应相对平均地分布在 A、B、C 或 D 项。

    (10)各选项从短到长排列。若选项均是数字,可从小到大排列。

    3. 组织诊断性测试

    实施诊断性测试的时间比较弹性,教师可根据教学需要在教学过程的任意环节实施,随时发现学生问题、进行有效指导。如:将诊断性测试用于课前,对学生进行“摸底”,提前感知学生的水平,以便后续开展针对性教学;诊断性测试用于课中,对课堂中所教授的知识进行随堂检测,及时诊断学生的掌握情况;用于课后,主要以作业的形式,对学生整堂课的学习进行诊断,并向学生提供尽可能详尽的个性化反馈。此外,诊断性测试的实施范围也比较灵活,可以全班共同完成某些任务,也可以分组或个人完成同一或不同任务,并可根据实际情况及时调整(当试题难度大、自我诊断无法完成时,可改为由小组或全班学生合作完成)。

    4. 提供反馈信息

    诊断性测试的结果分析应尽可能详尽,包括各方面的信息,如语言技能、学习能力、学习方法、心理因素等。此外,如Harding等(2015)指出,诊断性测试的反馈形式也应尽可能丰富多样。目前,不少教师仅将一个分数作为诊断性测试的结果反馈给学生,这样做效果不好。教师可采取多种方式,如通过与学生谈话,向其提供详尽的反馈信息。从总体上而言,线上收集的反馈可反映学生的做题过程和题目完成情况,如题目完成时间、完成数量、答对率、平均分等。线上诊断性测试案例述评

    本案例围绕如何通过阅读活动及阅读后的诊断性测试促进学生英语学科核心素养的养成。测试共包括5道题目(3道多项选择题、1道填表题与1道书面表达题),能够对学生的阅读能力和辨识、归纳、分析、评价等思维认知能力进行诊断。测试全文共250个词,适用于初三学生。教师采用线上线下的混合式教学,主要的教学步骤和诊断任务*设置如下。

    步骤一:教师组织学生阅读以下短文。

    Are zoos a good thing?

    Zoos are popular attractions for adults and children. But are they actually a good thing?

    Critics (批评家) of zoos would argue that animals often suffer a lot by being closed. Even the best zoos cant provide the environment that animals have in their natural habitats(栖息地). Catching animals in the wild also causes much suffering by keeping them away from families. This causes many zoo animals to become stressed or ill, and some may even die earlier than their wild relatives.

    On the other hand, by bringing people and animals together, zoos can educate the public about the saving of animals and inspire people to protect animals and their habitats. Some zoos provide a safe environment for animals which have been mistreated in circuses, or pets which have been abandoned. One of the most important functions of zoos is supporting international breeding programmes, particularly for endangered species. In the wild, some of the rarest species have difficulty in finding mates and breeding, and they might also lose their habitats. A good zoo will enable these species to live and breed in a secure environment.Zoos also carry out important research into subjects such as animal behavior and how to treat illnesses.

    So, are zoos good for animals or not? Perhaps it all depends on how well every zoo is managed, and the benefits of zoos can surely outweigh(胜过) their harmful effects. However, it is understandable that many people believe imprisoning(关押) animals for any reason is simply wrong.

    步骤二:教师组织学生就文章的主旨、细节等方面内容进行课堂问答,而后组织学生完成线上预设的诊断性测试。

    测试题一:选择题(电脑页面呈现试题)(见图1— 3)。学生选择答案后,电脑页面会出现相应的答案解释,对学生存在的问题进行诊断,并指出不足和改进建议。

    图1的反馈信息:

    B(正确答案):你具有信息定位能力,能根据原文信息判断题干是否正确。该选项是对原文说法的同义替换,separate from和keep… away from是同一词组。定位原文(第2段):“Catching animals in the wild also causes much suffering by keeping them away from families. This causes many zoo animals to become stressed or ill, and some may even die earlier than their wild relatives.”。

    

    A(錯误项):选项与原文说法不符。定位原文(第2段):“Even the best zoos cant provide the environment that animals have in their natural habitats”。

    C(错误项):选项与原文说法相反,定位原文(第3段):“Zoos also carry out important research into subjects such as animal behavior and how to treat illnesses. ”。第3段讲的是zoos的优点,zoos可以为科研提供帮助。而选项的意思则相反,认为zoos将动物保护起来不用于科研用途。

    D(错误项): 选项与原文说法相反,定位原文(第3段):“zoos can educate the public about the saving of animals and inspire people to protect animals and their habitats.”。选项应将 less改成more。本题要求学生调动逻辑思维能力进行分析和判断。

    图1的命题设计分析:

    本题考查学生对文章细节的把握,旨在锻炼学生评估信息(evaluate)的思维能力,即根据原文所给信息,判断题干信息是否正确的能力(appraise and judge whether the information given is valid and reliable)。

    图2的反馈信息:

    

    C (正确答案):本题旨在考查学生对语篇结构的理解。本文是一篇“总分总”结构文章,第1段是首段,第2和第3段是中间主体段,第4段是结尾段。而第2和第3段,很明显是从正、反两个方面去阐明zoos的缺点和优点。因此C选项表达的逻辑最符合本文的语篇特点。

    图2的命题设计分析:

    本题旨在考查学生对语篇结构的理解,对学生语篇分析能力进行诊断。

    图3的反馈信息:

    A(正确答案):本题旨在考查学生对作者态度的判断能力。定位原文(第4段):“So, are zoos good for animals or not? Perhaps it all depends on how well every zoo is managed, and the benefits of zoos can surely outweigh their harmful effects.”。 这两句话表达的意思是,zoos的积极作用要大于消极作用,因而我们可以据此判断出作者的态度。

    B(错误项):选项与画线部分表达的意思相反。

    C (错误项):选项文中没有提及,无法得知。

    

    图3的命题设计分析:

    本题旨在考查学生对作者态度的判断能力,旨在调动学生辨别(judge)和分析(analyze)信息的思维技能,并对学生的辨别和分析能力进行诊断。

    测试题二:填表题(见图4)

    图4的反馈信息:

    参考答案:

    Advantages:

    Zoo can educate people to protect animals.

    Zoo can provide a safe environment for animals.

    Zoo can help protect endangered animals from dying out.

    Disadvantages:

    Animals would be trapped in zoos so that they are kept away from families.

    Animals would die earlier than their wild relatives since they are away from their natural habitats.

    评分建议:

    本题要求学生对阅读原文进行再梳理。学生可以用完整的句子或多个短语进行回答,要求内容准确、语法正确。

    图4的命题设计分析:

    本题旨在锻炼学生对原文信息进行整合(organize)与概括(generalize)的思维技能,并对其能力进行诊断。

    测试题三:书面表达题(见图5)

    图5的反馈信息:

    参考答案:

    On the whole, I believe zoos play a positive role. Zoos have multiple benefits to todays society. Firstly, zoos teach people species diversity. By visiting zoos, people can observe their habits. Secondly, zoos provide a safe environment for animals to live in. If they still live in the wild, its more likely that they would be killed by their enemies. Thirdly, some animals pose a threat to human beings. So in order to protect human beings, such kind of animal should be closed in zoos.

    To sum up, zoos bring more benefits than harmful effects to the society.

    圖5的命题设计分析:

    本题要求学生围绕zoo这一主题发表自己的看法,旨在调动学生批评(critique)与议论(argue)的思维技能,进而锻炼学生发表观点(make a judgement)的能力。完成写作后,学生根据教师提供的参考范文与评分标准(见表2),对写作进行自我诊断,以发现自己的优势与不足。结语

    测评是课程实施中的重要环节。关注过程的诊断性测试有利于教师和学生及时发现教与学的不足,较为精准地判断学生现状与培养目标和课程要求的差距,进而促使教师不断调控教学计划与教学策略。特别是在新冠肺炎疫情发生的大背景下,开展对线上诊断性测试的设计与实施及其有效性的探究显得尤为必要。为了提高诊断性测试的效度和信度,日后的研究和实践可围绕如何发挥线上测试在内容呈现方式的多样化、测试反馈的及时性和丰富性等优势,进一步探讨线上诊断性测试试题的设计技术、测试与教学的融合方法,同时开展提高诊断反馈信息的针对性并落实学生根据反馈信息改进学习的策略研究。

    

    参考文献

    Alderson, J. C. 2000. Assessing Reading[M]. Cambridge: Cambridge University Press.

    Alderson, J. C. 2005. Diagnosing Foreign Language Proficiency: The Interface between Learning and Assessment[M]. London: Continuum.

    Alderson, J. C., Brunfaut, T., Harding, L. 2014. Towards a Theory of Diagnosis in Second and Foreign Language Assessment: Insights from Professional Practice Across Diverse Fields[J]. Applied Linguistics, 36(2): 236—260

    ALTE. 1998. Multilingual Glossary of Language Testing Terms [M]. Cambridge: University of Cambridge Local Examinations Syndicate and Cambridge University Press.

    Bloom, B. S. 1956. Taxonomy of Educational Objectives[M]. Boston: Addison Wesley Publishing Company.

    Harding, L., Alderson, J. C., Brunfaut, T. 2015. Diagnostic Assessment of Reading and Listening in a Second or Foreign Language: Elaborating on Diagnostic Principles[J]. Language Testing, 32(3): 317–336

    Hughes, A. 1989. Testing for Language Teachers[M]. Cambridge: Cambridge University Press.

    Purpura, J. 2004. Assessing Grammar[M]. Cambridge: Cambridge University Press.

    陈明洁. 2012. 高职英语在线诊断和训练系统的构建研究[J]. 佳木斯教育学院学报, (02): 200—214

    樊剑. 2014. 《实时反馈与在线诊断E化教学系统》制作综述[J]. 中国信息技术教育, (21): 73—77

    冯宝鑫, 马炳军. 2019. 基于移动技术的诊断性语言测试的调研与优化策略[J].韶关学院学报, (08): 57—61

    桂诗春. 1986. 标准化考试——理论、原则与方法[M]. 广州: 广东高等教育出版社.

    李筱菊. 1997. 语言测试科学与艺术[M].长沙: 湖南教育出版社.

    莫运国. 2002. 诊断性测试在英语教学中的应用[J]. 教育科学研究, (12): 47—49

    贾添琦,华南师范大学外国语言文化学院研究生。

    黄丽燕,华南师范大学外国语言文化学院教授,博士生导师,副院长。