形成性评价对医学生临床实践能力的影响

    刘成玉 马新衡 王晶 杨永洁 王元松

    

    

    [摘要] 目的 探討形成性评价对医学生临床实践能力的影响。

    方法 采用“示教-训练-评价与反馈-再训练(改进)-再评价”模式,对临床医学专业卓越班(形成性评价组)医学生的《临床技能学》学习和临床实习阶段的临床实践能力进行培训与评价,教学过程中采用小型临床演练评估(Mini-CEX)、临床操作技能直接观察法(DOPS)评价;普通班(非形成性评价组)医学生按照传统教学方法授课与临床实习。临床实习结束后,采用客观结构化临床考试(OSCE)对两组医学生的临床实践能力进行考核与评价,观察形成性评价对OSCE成绩的影响。

    结果 形成性评价组病史采集、病例分析、体格检查、临床穿刺与置管术、外科基本操作、无菌技术、急救技术、儿科学技能、妇产科技能等得分均高于非形成性评价组,差异有显著性(t=8.210~16.379,P<0.01)。两组成绩的差异主要体现在职业素养、操作技巧、临床思维和医患沟通等方面,而影像学结果与心电图结果判读成绩差异无显著意义。

    结论

    形成性评价可显著提高医学生的临床实践能力。

    [关键词] 形成性评价;临床工作能力;教育考核;学生,医科

    [中图分类号] G642

    [文献标志码] A

    [文章编号] 2096-5532(2021)03-0455-04

    doi:10.11712/jms.2096-5532.2021.57.127

    [开放科学(资源服务)标识码(OSID)]

    [网络出版] https://kns.cnki.net/kcms/detail/37.1517.R.20210628.1639.009.html;2021-06-29 11:01:38

    EFFECT OF FORMATIVE ASSESSMENT ON CLINICAL PRACTICE ABILITY OF MEDICAL STUDENTS

    LIU Chengyu, MA Xinheng, WANG Jing, YANG Yongjie, WANG Yuansong

    (Clinical Skills Teaching Experimental Center, Medical College of Qingdao University, Qingdao 266071, China)

    [ABSTRACT]Objective To investigate the effect of formative assessment on the clinical practice ability of medical students.

    Methods The method of “teaching-training-evaluation and feedback-retraining (improvement)-reevaluation” was used to train and evaluate the ability for Clinical Skills learning and the clinical practice ability during clinical internship among the medical students in excellence class (formative assessment group), and Mini-Clinical Evaluation Exercise (Mini-CEX) and direct observation of procedural skills (DOPS) were used for evaluation during teaching. The medical students in regular class (non-formative assessment group) received teaching and clinical internship based on traditional teaching methods. After clinical internship, objective structured clinical examination (OSCE) was used to assess and evaluate the clinical practice ability of the two groups, and the inf-

    luence of formative assessment on OSCE score was observed.

    Results Compared with the non-formative assessment group, the formative assessment group had significantly higher scores of medical history collection, case analysis, physical examination, clinical puncture and catheterization, basic surgical operation, aseptic operation, first-aid technique, pediatric skills, and gynecological and obstetrical skills (t=8.210-16.379,P<0.01). There were significant differences between the two groups in the examination scores of professional quality, operational skills, clinical thinking, and doctor-patient communication, while there was no significant difference in the score of interpretation of imaging and electrocardiographic findings.

    Conclusion Formative assessment can significantly improve the clinical practice ability of medical students.

    [KEY WORDS]formative assessment; clinical competence; educational measurement; students, medical

    医学教育承载着培养医学卫生人才使命,与全民健康息息相关。人才培养质量是医学教育的生命线,也是健康中国建设的根本保证。临床实践能力是临床医学专业本科毕业生应达到的4个基本要求之一[1],具备扎实熟练的临床基本技能是医学生成长和持续发展的基石[2]。如何培养、提高与考核评价医学生临床实践能力是临床教学的重点和难点,国内外部分高等医学院校进行了大量的实践与改革,也取得了较好的效果[3-10]。为了进一步有效提高医学生的临床实践能力,我们于2017年开始在临床实践能力教学过程中实施形成性评价。本文旨在探讨形成性评价对医学生临床实践能力的影响。

    1 对象与方法

    1.1 研究对象

    2013年级和2014年级临床医学专业5年制医学生518名,男性207名,女性311名,年龄21~24岁。其中普通班(非形成性评价组,A组)457名,卓越医生班(形成性评价组,B组)61名。

    1.2 方法

    1.2.1 课程开设 非形成性评价组按照常规教学计划开设专业课和临床实习。在常规教学计划基础上,形成性评价组于第7学期开设《临床技能学》课程,课内32学时,课外(开放实验室)32学时,主要目的是培养与训练医学生临床基本技能。

    1.2.2 教学方法 形成性评价组临床专业课教学与非形成性评价组一致,但在《临床技能学》教学过程中,采用小型临床演练评估(Mini-CEX)、临床操作技能直接观察法(DOPS)评价[11-13],按照“示教-训练-评价与反馈-再训练(改进)-再评价”模式,进行临床实践能力培训与评价,每2周进行1次形成性评价。临床实习阶段实行“一对一”临床带教,并按照“示教-训练-评价与反馈-再训练(改进)-再评价”模式,每月进行1次Mini-CEX、DOPS评价。非形成性评价组按照传统教学方法授课与临床实习。

    1.2.3 考核方法 在临床实习结束后,采用客观结构化临床考试(OSCE)对两组医学生的临床实践能力进行考核与评价[6,12-14]。两组OSCE的时间、地点、考核内容与标准、考官等均一致。

    1.2.4 OSCE考站设置与评价标准 根据专业培养目标和要求、临床实践能力教学目标, OSCE共设13个考站(表1)。每站均有严格的评分标准,包括操作前准备、操作过程和操作后处理的标准,评分标准均分解到每一个具体的操作步骤,并严格按照OSCE考核流程和标准、评分要求进行考核[6,15]。评分中操作前准备占10%,操作过程占70%,操作后处理占10%,评价(职业素养、操作技巧和医患沟通)占10%。病例分析站和体格检查站以2站平均分作为最终考核结果。

    1.3 统计学处理

    结果采用SPSS 17.0统计软件进行分析。计量资料以±s表示,组间比较采用t检验。以P<0.05为差异有显著性。

    2 结? 果

    形成性评价组病史采集、病例分析、体格检查、临床穿刺与置管术、外科基本操作、无菌技术、急救技术、儿科技能、妇产科技能等项目得分均高于非形成性评价组,差异有显著性(t=8.210~16.379,P<0.01)。两组成绩的差异主要体现在职业素养、操作技巧、临床思维和医患沟通等方面,而影像学结果与心电图结果判读成绩差异无显著性。见表2。

    3 讨? 论

    医学教育是卫生健康事业发展的重要基石,培养仁心仁术的医学人才是实施健康中国战略的重要任务。医学教育除了传授基础理论知识外,最重要的是培养与提高医学生的临床实践能力[16]。推进 “卓越医生教育培养计划2.0”,加快以能力为导向的医学生考试评价改革是医学教育创新发展的重要举措[17]。因此,医学生实践能力培养与考核评价是医学教育的重点和热点问题。而医学生实践能力培养与考核评价需要持续的及时反馈与师生互动,以达到融知识、技能、人文素养与职业价值于一体的医学教育终极目标。

    OSCE是一种在模拟临床真实环境下考核与评价医学生或医生临床胜任力的方法,常用于本科生和毕业后阶段医生的高利害终结性评价,已被广泛应用于医学生临床实践能力考核[6,18-19]。本文结果显示,形成性评价组病史采集、病例分析、体格检查、临床穿刺与置管术、外科基本操作、无菌技术、急救技术、儿科技能、妇产科技能等项目考核成绩明显高于非形成性评价组,提示形成性评价有助于提高医学生临床实践能力。

    形成性评价是一种教学活动,是基于对医学生学习过程的持续观察、认真记录,对教学结果深刻反思(反馈)、不断改进而进行的发展性评价,它强调教学过程与评价过程相结合[20-21]。本研究所采用的Mini-CEX、DOPS是用于评价医学生临床实践能力的形成性评价方法,两者也是一种基于工作场所的评价(WPBA)的评价方法[22-23],在提高医学生自主学习能力、临床技能操作规范与技巧、临床思维能力以及医患沟通能力等方面有显著优势[24-27]。本文结果显示,除了影像学结果与心电图结果判读成绩无差异外,形成性评价组其他技能的成绩均高于非形成性评价组,提示形成性评价不仅有助于培养临床操作能力,而且更重要的是能提高医学生自主学习能力、临床操作技巧、临床思维能力以及医患沟通能力[23,28]。由于普通班与卓越医生班医学生在高考入学成绩、综合素质方面无明显差异,且普通班与卓越医生班是随机分班,因此高考入学成绩以及综合素质对OSCE考核成绩影响不大。而形成性评价组临床专业课教学、临床实习与非形成性评价组一致,但形成性评价组在《临床技能学》课程学习和临床实习过程中,实施了形成性评价的教学方法,因此,形成性评价组OSCE考试成绩高于非形成性评价组,可能与形成性评价有直接關系。

    研究表明,Mini-CEX、DOPS特別注重过程、关注未来、关注学生发展、注重教与学融合、注重师生之间互动,强调教学过程与评价过程相结合,重视和强调教与学过程中的及时反馈和持续改进,更有利于教师及时总结反馈、调整教学方案和改进教学方法[29-30]。虽然两者在提高学生自主学习能力、临床技能操作规范、临床思维能力以及医患沟通能力等方面均有显著优势,且Mini-CEX更加注重人文关怀与医患沟通的评价与反馈,但是本文结果显示,两组之间OSCE成绩的差异主要体现在职业素养、操作技巧、临床思维和医患沟通等方面。因此,人文关怀与医患沟通能力的培养需要多途径、多时段、多环境的实践与训练,才能达到有效的效果[31-32]。

    虽然本文结果显示形成性评价具有显著提高医学生临床实践能力的作用,但是Mini-CEX、DOPS也存在着评价的主观性较强、评价标准不一致、反馈结果难以标准化等问题。因此,只有进一步完善评价体系、强化师资培训、增加实践机会、结合其他教学方法与评价方法,才能取得更有效的教学效果。

    [参考文献]

    [1]教育部临床医学专业认证工作委员会. 中国本科医学教学标准——临床医学专业(2016版)[M].? 北京:北京大学医学出版社, 2018.

    [2]李新芝,柳小玲,孙红,等. 基于执业能力的临床实践技能培养体系研究[J].? 中华医学教育探索杂志, 2019,18(3):294-297.

    [3]谷雪明,尹剑,张旭,等. 本科临床医学人才实践能力培养模式的建立与应用[J].? 中华医学教育探索杂志, 2017,16(6):546-550.

    [4]刘成玉,王元松,李云芳,等. 卓越医生教育培养计划下学生临床实践能力培养的思考[J].? 中华医学教育探索杂志, 2017,16(3):303-306.

    [5]姚晨姣,姜艳红,吴健珍,等. 医学教育不同阶段临床实践能力考核的分析与启示[J].? 高校医学教学研究(电子版), 2018,8(4):8-13.

    [6]李云芳,王元松,姚珊珊,等. 医学生临床实践能力考核与评价方法的探索与实践[J].? 青岛大学医学院学报, 2015,51(5):614-616.

    [7]王元松,杨永洁,张代军,等. 基于卓越医生培养的临床实践能力教学创新与实践[J].? 青岛大学学报(医学版), 2020,56(1):112-115.

    [8]NUZZO A, TRAN-DINH A, COURBEBAISSE M, et al. Improved clinical communication OSCE scores after simulation-based training: results of a comparative study[J].? PLoS One, 2020,15(9):e0238542.

    [9]张进,杨立斌,张淑娥,等. 形成性评价在本科临床医学教育中的实施现状与提升策略[J]. 中华医学教育杂志, 2021,41(4):372-375.

    [10]魏春岚,柴健民,刘瑞麟,等. 以岗位胜任力为导向的医学生考核评价体系的实践和探索[J].? 中华医学教育探索杂志, 2021,20(1):71-75.

    [11]FARAJPOUR A, AMINI M, PISHBIN E, et al. Using modified Direct Observation of Procedural Skills (DOPS) to assess undergraduate medical students[J].? Journal of Advances in Medical Education & Professionalism, 2018,6(3):130-136.

    [12]GIEMSA P, WBBOLDING C, FISCHER M R, et al. What works best in a general practice specific OSCE for medical students: Mini-CEX or content-related checklists[J]?? Medical Teacher, 2020,42(5):578-584.

    [13]LRWALD A C, FELICITAS-MARIA L, MOOSER B, et al. Influences on the implementation of Mini-CEX and DOPS for postgraduate medical trainees learning: a grounded theory study[J].? Medical Teacher, 2019,41(4):448-456.

    [14]刘成玉,王元松. 临床技能学考核与评价体系的建立与实践[J].? 中国高等医学教育, 2009(1):14-16.

    [15]刘成玉,沈建箴,王元松. 临床基本技能考核与评价[M].? 北京:人民卫生出版社, 2019.

    [16]徐薇薇,刘晖,张勤. 医学精英教育的探索与实践[J].? 高校医学教学研究(电子版), 2020,10(4):3-7.

    [17]国务院办公厅. 国务院办公厅关于加快医学教育创新发展的指导意见(国办发[2020]34号)[Z]. 2020-09-17.

    [18]WILBY K J, GOVAERTS M, AUSTIN Z, et al. Discrimina-

    ting features of narrative evaluations of communication skills during an OSCE[J].? Teaching and Learning in Medicine, 2019,31(3):298-306.

    [19]MLTNER A, LEHMANN M, WACHTER C, et al. For-

    mative assessment of practical skills with peer-assessors: qua-

    lity features of an OSCE in general medicine at the Heidelberg Medical Faculty[J].? GMS Journal for Medical Education, 2020,37(4):Doc42.

    [20]王维民主译. 医学教师必读——实用教学指导[M].? 北京:北京大学医学出版社, 2019.

    [21]WALSH E, FOLEY T, SINNOTT C, et al. Developing and piloting a resource for training assessors in use of the Mini-CEX (mini clinical evaluation? exercise)[J].? Education? for Primary Care, 2017,28(4):243-245.

    [22]梁宇,孟晶莹,乔建梁. 形成性评价在临床技能模拟训练课程中的应用[J].? 中华医学教育探索杂志, 2020,19(2):141-144.

    [23]BOCK A, PETERS F, ELVERS D, et al. Introduction of mini-clinical evaluation exercise in teaching dental radiology-a pilot study[J].? European Journal of Dental Education, 2020,24(4):695-705.

    [24]徐广文,徐世斌,徐美清,等. 形成性评价在住院医师规范化培训胸外科规培中的应用[J].? 中华全科医学, 2020,18(2):307-310.

    [25]SNEKALATHA S, MARZUK S M, MESHRAM S A, et al. Medical students perception of the reliability, usefulness and feasibility of unproctored online formative assessment tests[J]. Advances in Physiology Education, 2021,451(1):84-88.

    [26]陈洪苹,钟镝,尹德春,等. 医学教育中形成性评价的工具及其应用现状[J].? 中国高等医学教育, 2021,3:41-42.

    [27]郭劲松,郭庆峰,薄红,等. 形成性评价在本科临床教学阶段的应用和探索[J].? 医学教育管理, 2020,6(1):11-14.

    [28]GRAF J, LODA T, ZIPFEL S, et al. Communication skills of medical students: survey of self-and external perception in a longitudinally based trend study[J].? Medical Education, 2020,20(4):47-48.

    [29]LEE V, BRAIN K, MARTIN J. Factors influencing Mini-CEX rater judgments and their practical implications[J].? Academic Medicine, 2017,92(6):880-887.

    [30]胡吉富,范佳智,李利華,等. 专业课程考试结果的分析和反馈在提升教学质量中的运用[J].? 高校医学教学研究(电子版), 2019,9(6):48-52.

    [31]王元松,李云芳,刘成玉,等. 医学生医学人文素质状况调查与分析[J].? 青岛大学医学院学报, 2012,48(4):371-373.

    [32]刘成玉,李云芳,王元松,等. 医学生医患沟通能力的调查分析与培养措施探讨[J].? 中华医学教育探索杂志, 2012,11(3):329-332.

    (本文编辑 马伟平)