Mannheimer Training für OSCE-Prüfende - Manual 1. Auflage, 2021 Medizinische Fakultät Mannheim der Universität Heidelberg - merlin bw
←
→
Transkription von Seiteninhalten
Wenn Ihr Browser die Seite nicht korrekt rendert, bitte, lesen Sie den Inhalt der Seite unten
Medizinische Fakultät Mannheim der Universität Heidelberg Mannheimer Training für OSCE-Prüfende Manual 1. Auflage, 2021
Impressum 1. Auflage, März 2021 Herausgeber Abteilung Medizinische Ausbildungsforschung GB Studium und Lehrentwicklung Medizinische Fakultät Mannheim der Universität Heidelberg Theodor-Kutzer-Ufer 1-3 68167 Mannheim Tel.: 0621 383 71 270 Redaktion Kathrin Nühse PD Dr. Katrin Schüttpelz-Brauns Dr. Mareike Pieper Angelika Homberg Renate Strohmer Prof. Dr. Jens Kaden Copyright © 2021, Medizinische Fakultät Mannheim der Universität Heidelberg Das Mannheimer Training für OSCE-Prüfende wurde im Qualitätspakt Lehre vom Bundesministerium für Bildung und Forschung gefördert und ist Teil des MERLIN-Projektes „Kompetenzorientiert Lernen, Lehren und Prüfen in der Medizin“. 3
Inhalt Impressum 3 Inhalt 4 Vorwort 5 Einführung 6 OSCE-Prüfungen und die Rolle der OSCE-Prüfenden 6 Ziele des Ma-TOP 6 Didaktische Grundlagen 7 Das Mannheimer Training für OSCE-Prüfende 8 Ablauf des Trainings 8 Inhalte und Ablauf des Mannheimer Trainings für OSCE-Prüfende 10 1a Online-Kurs für unerfahrene OSCE-Prüfende 10 1b Online-Kurs für erfahrene OSCE-Prüfende 11 2 Einführung vor Ort 11 3 Stationsvideo und Checkliste 11 4 Beobachtung und Feedback 11 Voraussetzungen 12 Technische Voraussetzungen 12 Personelle Voraussetzungen 12 Weitere Voraussetzungen 12 Empirische Daten 13 Einbettung des Mannheimer Trainings für OSCE-Prüfende 13 Anpassung von Ma-TOP an die standorteigenen Bedingungen 13 Literatur 14 4
Vorwort Während die Prüflinge ihre Aufgabe bearbeiten, kreuzen die Prüfenden auf der Checkliste die ab- Objektive standardisierte klinische Prüfungen solvierten Anforderungen ab. Die Prüfungszeit en- (Objective Structured Clinical Examination, OSCE) det mit der Ansage „Bitte Station wechseln“. Die gehören zu den kompetenzorientierten Prüfungs- Prüflinge verlassen den Raum und warten vor der formaten, welche bereits während des Medi- nächsten Tür auf die Aufforderung zum Beginn die- zinstudiums eingesetzt werden. Sie bieten die ser Station. Der Rotationsplan wird den Prüflingen Möglichkeit, klinisch-praktische Fertigkeiten zu vorab ausgehändigt, sodass sie sich gut orientieren überprüfen. Im Gegensatz zu Multiple-Choice-Prü- können. fungen, welche Wissen in standardisierter Form ab- Die Checklisten bestehen aus dem Aufgabentext fragen und bewerten, sind OSCE nicht per se objek- mit einer Fallvignette und vier Aufgaben, für die je- tiv und bedürfen daher eines speziellen Trainings weils 5 Punkte vergeben werden. Die erste Aufgabe der OSCE-Prüfenden. betrifft jeweils die Kommunikation, die entspre- chend zu 25% in die Endnote eingeht. Bisherige OSCE-Trainings für Prüfende sind sehr Für jede Station gibt es mehrere Varianten von Fall- aufwändig, sowohl im zeitlichen Umfang als auch in vignetten, welche zufällig über die Durchläufe hin- der Koordination von Terminen mit klinisch tätigen weg ausgewechselt werden, sodass Studierende Prüferinnen und Prüfer. Das Mannheimer Training späterer Durchläufe keine Vorteile erlangen. für OSCE-Prüfende wurde entwickelt, um standar- disierte Prüfungsbedingungen für den fächerüber- Die Entwicklung wurde vom Bundesministerium greifenden OSCE vor dem Praktischen Jahr (FLN- für Bildung und Forschung im Rahmen des MER- OSCE, siehe Kasten) an der Medizinischen Fakultät LIN-Projekts gefördert („Kompetenzorientiert Ler- Mannheim zu schaffen mit dem Ziel, möglichst nen, Lehren und Prüfen in der Medizin“, Qualitäts- ressourcenschonend den größtmöglichen Effekt zu pakt Lehre). Dabei lag der Fokus vor allem auf dem erzielen. Verhalten der Prüfenden während der Prüfung. Ziel des Trainings ist eine gesteigerte Objektivität der FLN-OSCE im Mannheimer Reformierten Prüfungsbeurteilung. Curriculum Medizin (MaReCuM) Das Mannheimer Training für OSCE-Prüfende (Ma- Der Mannheimer FLN-OSCE wird zentral vom Team TOP) setzt sich aus den folgenden, aufeinander des Lernkrankenhauses TheSiMa, einer Unterabtei- aufbauenden Teilen zusammen: lung des Geschäftsbereichs für Studium und Lehr- • Online-Kurs zur zeitunabhängigen Vorbereitung entwicklung durchgeführt. Er besteht aus 12 Sta- • Kurze Einführung mit den wichtigsten Details und tionen von je 8 Minuten. Entsprechend werden pro Änderungen direkt vor Ort am Prüfungstag Durchlauf 12 Studierende geprüft. Der OSCE findet • Stationsbezogene Schulung inkl. Checklisten- an zwei bis vier aufeinander folgenden Tagen mit training direkt vor Ort am Prüfungstag mehreren Durchläufen statt. • Persönliches Feedback nach kurzer Beobachtung während der Prüfung Der zeitliche Ablauf des OSCE wird zentral über auto- matisierte Lautsprecheransagen koordiniert. Nach Durch die Kombination von festen und variablen der Ansage „Bitte beginnen Sie jetzt“ betreten die Bausteinen kann Ma-TOP an andere medizinische Prüflinge die OSCE-Stationen, die prüfenden Per- Fakultäten transferiert und genutzt werden. sonen prüfen die Identität der Prüflinge und lesen Dieses Manual bietet eine Erläuterung des Ma-TOP im Anschluss den Aufgabentext wortwörtlich vor. sowie der Nutzungsvoraussetzungen für andere Fakultäten. 5
Einführung Ziele des Ma-TOP Das Training verfolgt folgende Lernziele für die Teil- nehmenden (künftige OSCE-Prüfende): OSCE-Prüfungen und die Rolle der OSCE-Prüfenden Wissen Mit der OSCE-Prüfung kann nicht nur medizini- • Die Teilnehmenden wissen, warum und mit sches Wissen, sondern vor allem praktische Fertig- welchem Ziel OSCE-Prüfungen durchgeführt keiten und Kompetenzen erfasst werden. In einem werden und welche Besonderheiten dieses OSCE durchlaufen die Prüflinge verschiedene Prüfungsformat aufweist. Prüfungsstationen im Rotationsprinzip. Mit dieser • Sie kennen den Ablauf von OSCE-Prüfungen. Methode können mehrere Studierende pro Durch- • Sie kennen den Ablauf von einzelnen OSCE- gang gleichzeitig geprüft werden, je nach Anzahl Stationen. der Stationen. Jede Prüfungsstation wird von einer • Sie kennen typische Beobachtungsfehler. anderen prüfenden Person geführt. Die einzelnen • Sie wissen, wie OSCE-Prüfungen organisiert Prüfungen sind zeitlich begrenzt, d. h. ein externes sind und welchen Beitrag sie für einen reibungs- Zeitsignal gibt den Takt an. Jede Station dauert losen Ablauf der Prüfung zu leisten haben. gleich lang. Die Leistung der Studierenden wird von den Prüfenden strukturiert mittels standardisierter Fertigkeiten Checklisten erfasst. • Sie können die Prüflinge objektiv beurteilen. Im Gegensatz zu Multiple-Choice-Fragen, die per se • Sie können die erbrachte Leistung an Hand objektiv in Durchführung, Auswertung und Inter- einer standardisierten Checkliste dokumentieren. pretation sind, kann die Persönlichkeit der OSCE- • Sie können den Einfluss der eigenen Person, Prüfenden eine Rolle bei der Durchführung und Be- beispielsweise durch Mimik und Gestik, im urteilung spielen. Daher ist es wichtig, den Ablauf Prüfungsverlauf weitgehend minimieren. und die Bewertung bestmöglich zu standardisie- • Sie können mit möglichen, während einer ren. Auch wenn dies gelingt, kann es immer noch Prüfungssituation auftretenden, Problemen zu unerwünschten Einflüssen der Prüfungsperso- umgehen und selbstständig Lösungen finden. nen kommen. Daher ist es bedeutsam den OSCE- Prüfenden in entsprechenden Trainings nicht nur Haltungen den Ablauf der Prüfungen, sondern auch ihren per- • Die Teilnehmenden identifizieren sich mit sönlichen Einfluss auf die Objektivität der Prüfung der Rolle als Prüferin oder Prüfer. zu vermitteln. • Sie kennen ihre Grenzen und Schwächen in Bisherige OSCE-Trainings für Prüfende waren zeit- Bezug auf ihr Verhalten bei OSCE-Prüfungen aufwändig in der Durchführung und aufwändig und reflektieren ihr Handeln. in der Koordination der Teilnehmenden, da diese • Sie sind sich ihrer Verantwortung gegenüber zumeist aus dem klinischen Setting stammen und der Fakultät und gegenüber den Studierenden kaum Ressourcen für die Lehre bzw. für die Trai- bewusst. nings erübrigen können. 6
Durch das Training entstehen für die decken und die ausgeführten Handlungen Fakultät folgende Vorteile: zu überdenken. • OSCE-Prüfende können kompetenzorientiert 3. Learning by Doing: Die Teilnehmenden setzen nach einem bewährten, standardisierten die Inhalte direkt in die Praxis um und können Verfahren ausgebildet werden. dabei auf neue Verhaltensweisen zurückgreifen. • Das Training ist flexibel einsetzbar. • Für die Durchführung werden im Vergleich zu Um sowohl Wissen, Fertigkeiten und Haltungen zu herkömmlichen OSCE- Trainings für Prüfende adressieren und die Teilnehmenden weitgehend wenige zeitliche und materielle Ressourcen aktiv und selbstgesteuert in das Training einzubin- benötigt. den, werden unterschiedliche Bausteine im Blen- • Durch das Training wird eine hohe Durch- ded-Learning-Format wie folgt eingesetzt: führungsqualität der OSCE-Prüfungen im Hinblick auf Objektivität und Reliabilität 1. E-Learning-Einheit: gewährleistet. Erwerb von Wissen und Fertigkeiten Das zu vermittelnde Wissen können die Teilneh- menden selbstgesteuert über asynchron bereit- gestellte E-Learning-Materialien erwerben. Dies Didaktische Grundlagen bietet den Vorteil, dass die Teilnehmenden in ihrem eigenen Tempo zu beliebigen Zeitpunkten Didaktisch orientiert sich das Training an den Prin- sich mit der Thematik auseinandersetzen kön- zipien des handlungsorientierten Lernens: nen. Durch den interaktiven Aufbau werden die Beim handlungsorientierten Lernen (Kauffeld 2016) Teilnehmenden angeregt, das erworbene Wissen wird davon ausgegangen, dass Kompetenzen am auf konkrete Praxissituationen zu übertragen und besten durch Selbsttätigkeit erworben werden. eigene Entscheidungen zu überdenken. So können Den Lernenden wird ein großes Maß an Entschei- die Teilnehmenden beispielsweise anhand eines dungsspielraum zur Verfügung gestellt. Fehler kön- Videoclips zu einer allgemeinen Prüfungssituation nen in diesem Zusammenhang als Teil des Lern- das Beobachtungsverhalten und Ausfüllen einer prozesses betrachtet werden. Damit diese nützlich Checkliste einüben. Durch Multiple-Choice-Fragen in den Lernprozess eingebunden werden können, wird der Lernerfolg sichergestellt. Die Teilnehmen- müssen diese an die Lernenden zurückgemeldet den erhalten sowohl für die Beobachtungsaufgabe werden, so dass der Prozess der Überprüfung des als auch für die Multiple-Choice-Fragen ein direktes Handlungskonzepts erneut angestoßen werden Feedback und können die Aufgaben bei nicht Errei- kann. chen des Lernziels wiederholen. Um unterschiedli- che Voraussetzungen der Teilnehmenden adäquat Folgende Prinzipien sind dabei maßgebend: aufzugreifen, wird sowohl ein Training für Prüfen- 1. Direktives Lernen: Bereits vor der Aktivität de mit Prüfungserfahrung als auch ein Training für werden mögliche Handlungsoptionen thema- Prüfende ohne Prüfungserfahrungen angeboten. tisiert. Diese fließen dann direkt in praktische Während unerfahrene Prüfende zunächst mit den Übungen ein. Grundlagen und dem Ablauf der Prüfung vertraut 2. Reflexion: Nach Übungen und Aktivitäten gemacht werden, können erfahrene direkt an ihre werden zum Nachdenken anregende Fragen Vorkenntnisse anknüpfen und ihre bisherigen Er- gestellt, die dazu führen sollen, das Potenzial fahrungen reflektieren. Die auf diese Weise bereit- der gemachten Erfahrungen selbst zu ent- gestellten Online-Materialien sind zielgruppenspe- 7
zifisch ausgerichtet und folgen den didaktischen auf diese Weise praxisnah und umfänglich über- Prinzipien der Erwachsenenbildung durch die Ge- prüft werden. Damit entspricht das Training den währleistung des selbstgesteuerten und reflexiven Grundsätzen des Constructive Alignement (Biggs Lernens mit hoher Handlungsrelevanz (Siebert, 1996), da Lernziele, Lehr- und Lernaktivitäten sowie 2019). die Prüfungsform optimal aufeinander abgestimmt sind. 2. Videobasierte Simulationsübung: Einüben und Reflektieren Das so erworbene Wissen wird in einem zweiten Schritt auf eine konkrete OSCE-Prüfungsstation, Das Mannheimer Training für welche später durch die prüfende Person über- OSCE-Prüfende nommen werden soll, angewendet. Hierbei wird das Beobachten, Bewerten und Ausfüllen der Ablauf des Trainings Checkliste gezielt eingeübt und überprüft. Die Teil- Das Training wird in zwei verschiedenen Versionen nehmenden erhalten eine direkte Rückmeldung zu durchgeführt: eine Version für unerfahrene und der Qualität ihrer Beurteilung. Die in dieser Trai- eine Version für erfahrene OSCE-Prüfende. ningseinheit erworbenen Kompetenzen können Die unerfahrenen OSCE-Prüfenden absolvieren ei- direkt auf die spätere Prüfertätigkeit übertragen nen Online-Kurs, für den sie bei erfolgreicher Teil- werden. Durch den direkten Situationsbezug wird nahme eine Bescheinigung erhalten. Nur mit dieser die Bedeutung und der Nutzen des Trainings für die Bescheinigung werden sie zur Prüfung zugelassen. Teilnehmenden optimiert, der Trainingsaufwand Am Tag des OSCE erhalten sie eine Einführung vor minimiert. Nach der Expectancy-Value-Theory (Ec- Ort und schauen danach ein Video der Station, an cles & Wigfield, 1992; Eccles & Wigfield, 2000) kann der sie an diesem Tag prüfen. Während des OSCE dadurch die Motivation der Teilnehmenden aufge- werden sie von einer Person mit OSCE-Expertise baut und aufrechterhalten werden. beobachtet und erhalten im Anschluss Feedback. Erfahrene OSCE-Prüfende werden nur zur Prüfung 3. Transfer in die Praxis: zugelassen, wenn Sie eine verkürzte Version des Anwenden und Korrigieren Online-Kurses angesehen und eine entsprechen- In der dritten Phase erfolgt die Umsetzung in die de Bestätigung erhalten haben. Sie nehmen zu- Praxis. Der Transfer wird anhand einer formativen sammen mit den unerfahrenen Prüfenden an der arbeitsplatzbasierten Prüfung sichergestellt. Unter Einführung direkt vor dem OSCE teil. Wenn sie eine Supervision durch eine Person mit OSCE-Expertise Beobachtung ihres Verhaltens während der Prü- werden die Teilnehmenden als Prüferende in einen fung wünschen, können sie dies den Personen mit OSCE-eingebunden. Dabei werden sie beobachtet OSCE-Expertise mitteilen. Es ist möglich, die Beob- und erhalten direktes Feedback. Hierbei wird be- achtung auch durchzuführen, wenn es von Studie- urteilt, inwieweit es den Teilnehmenden gelingt, renden und /oder Simulationspersonen gewünscht mit der Organisation des OSCE umzugehen und ih- wird. ren Handlungsspielraum auszuschöpfen. Mögliche Fehler können erkannt und korrigiert und die eige- Prüfende, welche mindestens zwei Mal den Ablauf ne Rolle als Prüfende reflektiert werden. Den Teil- für unerfahrene Prüfende durchlaufen haben, kön- nehmenden werden anhand einer vorgegebenen nen als erfahrene Prüfende eingestuft werden. Checkliste durch die erfahrenen OSCE-Expertinnen Prüfende, die länger als ein Jahr in keinem OSCE und -Experten bewertet. Die im vorangegangenen geprüft haben, sollten noch einmal das komplette Lernprozess erworbenen Kompetenzen können Training durchlaufen. 8
Mitunter berichten Studierende oder auch Simula- len kann es vorkommen, dass erfahrene Prüfende tionspersonen, dass Prüfende sich nicht regelkon- trotz wiederholter Beobachtung und Feedback form verhalten. Dies wäre ein Anlass, diese Prüfen- sich nicht an die Vorgaben für OSCE-Prüfungen den während des OSCE erneut zu beobachten und halten. Diese sollten ggf. von weiteren Prüfungen ihnen Feedback zu geben. Wenn sie ihr Verhalten ausgeschlossen werden. nicht entsprechend ändern, werden sie wieder als unerfahrene Prüfende eingestuft. In seltenen Fäl- Das Verfahren ist in Abb. 1 dargestellt. Abbildung 1: Ablauf des Ma-TOP mit unerfahrenen und erfahrenen OSCE-Prüfenden Wichtig: Das Ma-TOP ist nur vollständig und garantiert damit auch eine gesteigerte Objektivität der Prüfungsbeurteilung, wenn alle Teile von den Prüfenden absolviert wurden. 9
Inhalte und Ablauf des Mannheimer Trainings für OSCE-Prüfende 1a Online-Kurs für unerfahrene OSCE-Prüfende Der Kurs endet mit einer Zusammenfassung, um Der Online-Kurs enthält alle notwendigen Infor- die wichtigsten Punkte noch einmal zu wiederholen. mationen, die eine Person für OSCE-Prüfungen Zusätzlich stehen Merkblätter zur Verfügung, die benötigt, um objektiv und standardisiert prüfen zu auf die Einführung vor Ort hinweisen, sowie die können. Neben der reinen Wissensvermittlung liegt wichtigsten Punkte für die Phasen vor, während ein weiterer Schwerpunkt auf der Anwendung des und nach dem OSCE beinhalten. Wissens. Im Online-Kurs nicht enthalten sind ausführliche Die Inhalte zur Prüfungstheorie wurden so aus- Informationen zur Prüfungstheorie, da das Trai- gewählt, dass sie auf die Einstellung der Prüfenden ning sehr anwendungsorientiert ist und daher nur wirken. Sie sollen sich der Verantwortung ihrer Rol- die wichtigsten theoretischen Grundlagen dar- le bewusst werden. gestellt werden. Diese beziehen sich auf die Not- Es folgt grundlegendes Wissen zum OSCE, sowohl wendigkeit der Rolle bzw. der Verantwortung der zur Theorie als auch zum Ablauf eines OSCE und Prüfenden sowie die Objektivität und Standardi- speziell des OSCE am Standort. sierung des OSCE. Die Theorie wurde soweit ver- Nach jedem theoretischen Abschnitt werden Inhal- kürzt, dass sie zwar Begründungen liefert, jedoch te zu häufig gestellten Fragen mit typischen Pro- die Aufmerksamkeit nicht allzu sehr beansprucht blemen, die beim OSCE auftauchen (sowohl zum bzw. die Relevanz der Informationen nachvollzieh- Ablauf des OSCE als auch zum Prüfen an der OSCE- bar ist. Des Weiteren fehlen konkrete Angaben zu Station) eingefügt. organisatorischen Details des aktuellen OSCE. Da Die Objektivität beim OSCE nimmt einen Schwer- sich die OSCE-Prüfungen hier geringfügig unter- punkt im Training ein. Hier werden nicht nur typi- scheiden können und der Online-Kurs zeitlich nicht sche Beobachtungsfehler anhand konkreter Bei- an den OSCE geknüpft ist, werden organisatorische spiele thematisiert, sondern auch entsprechende Informationen mit der Einladungsmail zur Prüfung Maßnahmen zur Standardisierung der Prüfung sowie in die Einführung vor Ort verlegt. abgeleitet. Die Bearbeitungsdauer des Online-Kurses für un- Beim FLN-OSCE werden kommunikative Kompe- erfahrene OSCE-Prüfende beträgt ca. 70 Minuten. tenzen geprüft. Diese verlangen Grundwissen, über das nicht alle Prüfende verfügen. Im Ma- TOP werden daher die Grundlagen der abzuprü- fenden kommunikativen Inhalte inkl. Hinweisen zum Ausfüllen der Checklisten-Items zur Kommu- nikation ausführlich behandelt. Bei der praktischen Übung zum Ausfüllen der Checkliste wird geprüft, ob die Teilnehmenden die Checkliste inkl. der Kommunikations-Items korrekt ausfüllen können. Es stehen insgesamt zwei Videos mit Musterlösungen zur Verfügung. 10
1b Online-Kurs für erfahrene OSCE-Prüfende 2 Einführung vor Ort Im Online-Kurs für erfahrene OSCE-Prüfende wer- Am Prüfungstag treffen sich alle Prüfenden 75 Mi- den wesentliche Themen des Kurses für unerfah- nuten vor dem OSCE-Beginn. In einer kurzen Ein- rene OSCE-Prüfende wiederholt und Erfahrungen führung präsentiert eine Person mit OSCE-Experti- aus der Durchführung des letzten OSCE mitgeteilt. se den Tagesablauf, gibt Hinweise zu inhaltlichen Da die Prüfenden wenig mit den kommunikativen Ergänzungen/Änderungen und wiederholt noch Inhalten des FLN-OSCE und deren Grundlagen ver- einmal die wichtigsten Punkte aus dem Training. In traut sind, beinhaltet auch dieser Kurs die Grund- diesem Rahmen können Fragen der Prüfenden be- lagen der abzuprüfenden kommunikativen antwortet werden. Inhalte inkl. der Hinweise zum Ausfüllen der ent- sprechenden Checklisten-Items. 3 Stationsvideo und Checkliste Im Sinne eines Fehlermanagements werden Prob- Im Anschluss gehen die Prüfenden an ihre Statio- leme bei der Durchführung des vorangegangenen nen, um sich mit dem Setting und den Vorlagen OSCE aufgriffen und deren Lösungen im Abschnitt (z.B. Checklisten) vertraut zu machen. Stolpersteine des letzten OSCE thematisiert. An den Stationen liegen Tablets oder Laptops be- Das Wissen um Beobachtungsfehler ist zentral bei reit, auf denen ein Video von einer Prüfung an der der standardisierten und objektiven Durchführung eigenen OSCE-Station dargestellt ist. Hier werden von OSCE. Daher werden typische Beobachtungs- die Fertigkeiten, die zu Punkten auf der Check- fehler und der korrekte Umgang mit ihnen anhand liste führen, aber auch typische Fehler, die keine konkreter Prüfungsbeispiele wiederholt. Punkte ergeben, textlich eingeblendet. Werden Am Ende des Kurses werden die Teilnehmenden Prüfende während des OSCE ausgetauscht, sollten zur Sammlung häufig gestellter Fragen im Kurs der nachfolgende Prüfende zuvor zwei bis drei Mal ihre unerfahrenen OSCE-Prüfenden weitergeleitet. Dies OSCE-Station im eigentlichen Prüfungsgeschehen dient der Wiederholung und Auffrischung. Außer- beobachten. Wenn gleichzeitig zwei Parcours statt- dem kann so gewährleistet werden, dass mögli- finden, können sich zwei Prüfende das Video zu- che Überarbeitungen bzw. Erweiterungen des Ab- sammen ansehen und sich dadurch abgleichen. schnitts zu den häufig gestellten Fragen für beide Erfahrungsgemäß schauen auch erfahrene Prü- Zielgruppen identisch sind. fende ihre Videos gern an und empfinden das als Der Kurs dauert ca. 15 Minuten. Warm-up. Oftmals prüfen sie auch eine andere Station als beim vorherigen Mal. Bei parallelen Par- cours fungieren sie als Stations-Expertinnen und -Experten für unerfahrene Prüfende. 11
4 Beobachtung und Feedback Personelle Voraussetzungen Während der OSCE-Prüfung werden die unerfah- Für das Ma-TOP wird eine Person für die Adminis- renen Prüfenden an ihrer Station von einer Person tration benötigt, die die OSCE-Prüfenden in das mit OSCE-Expertise anhand vorgegebener Kriterien System einträgt, freischaltet, verwaltet, zwischen möglichst in mehreren Situationen hintereinander erfahrenen und unerfahrenen Prüfenden unter- beobachtet. Diese Kriterien richten sich nach dem scheidet und die Teilnahmebescheinigungen über- optimalen Prüferverhalten (Ausfüllen der Checklis- prüft. te, neutrales Verhalten, keine Ablenkung). Nach der Außerdem muss rechtzeitig vor jedem Training die Beobachtung, möglichst in den Wechselpausen der Information für erfahrene Prüfende und die Präsen- zu Prüfenden, sollte ein kurzes konstruktives und tation der Vor-Ort-Schulung aktualisiert werden. sehr konkretes Feedback gegeben werden. Dieses Es muss eine Person geben, die die Endgeräte be- sollte gegebenenfalls zu einer direkten Verhaltens- schafft, verteilt und ggf. bei technischen Proble- änderung führen. Erfahrungsgemäß sind die meis- men hilft. Erfahrungsgemäß werden zusätzlich ten Prüfenden dankbar für das Feedback. mehrere studentische Hilfskräfte benötigt, die den Im Rahmen der Qualitätssicherung und/oder auf betreffenden OSCE bereits absolviert haben und Wunsch können auch erfahrene Prüfende beob- den Prüfenden an den OSCE-Stationen technische achtet werden. Auch sie erhalten anschließend Unterstützung geben, falls die stationsbezogenen Feedback. Videos nicht funktionieren. Zusätzlich muss mindestens eine Person mit OSCE- Expertise am Prüfungstag den Vortrag halten, die Voraussetzungen neuen Prüfenden während der Prüfung beobach- ten und im Anschluss Feedback geben. Je mehr Technische Voraussetzungen unerfahrene Prüfende in einem OSCE eingesetzt Der Online-Kurs von Ma-TOP wurde für Moodle ent- werden, desto mehr Personen mit OSCE-Expertise wickelt. Auf diesem System kann der Online-Kurs werden zum Beobachten und Feedbackgeben be- direkt übernommen werden. Andere Systeme er- nötigt. fordern eine Schnittstelle. Für die Präsenzveranstaltung sollten Endgeräte Weitere Voraussetzungen zum Anschauen der Videos bereitgestellt werden, Das Ma-TOP muss vor dem ersten Einsatz an die Be- die vor dem Zugriff Dritter (z.B. Prüflinge) geschützt dingungen des eigenen Standortes angepasst. Nä- sind. heres dazu ist im Abschnitt „Anpassung des Ma-TOP an die standorteigenen Bedingungen“ zu finden. 12
Empirische Daten Daher wird empfohlen, das Ma-TOP zentral einzu- binden, entweder als Teil der Medizindidaktik und/ oder Kooperation mit dem Lern-/Lehrkrankenhaus Das Ma-TOP wurde 2014 an der Medizinischen Fa- der Fakultät, falls dieses auch die OSCE-Prüfungen kultät Mannheim implementiert. Im ersten Durch- durchführt. Dadurch können die Effekte und der lauf wurden 30 Prüferinnen und Prüfer geschult, Nachdruck gegenüber den Prüfenden erhöht wer- die meist skeptisch gegenüber dem Training wa- den. ren. Aufgrund der zentralen Durchführung durch Die rechtlichen Bestimmungen zur Nutzung des eine Unterabteilung des Geschäftsbereichs für Ma-TOP außerhalb der Medizinischen Fakultät Studium und Lehrentwicklung, dem Lernkran- Mannheim der Universität Heidelberg sind in der kenhaus TheSiMa, sowie der Voraussetzung des entsprechenden Nutzungsvereinbarung verankert. absolvierten Trainings für den Einsatz als OSCE- Prüfende, wurde das Training mittlerweile als Teil des OSCE akzeptiert. In der Zeit von 2014 bis 2020 Anpassung von Ma-TOP an die haben 193 unerfahrene OSCE-Prüfende mit dem standorteigenen Bedingungen Training begonnen. Insgesamt wurden in dem ge- nannten Zeitraum 288 Teilnahmebestätigungen für Aufgrund der unterschiedlichen OSCE-Varianten unerfahrene und erfahrene OSCE-Prüfende an der an den medizinischen Fakultäten, muss das Ma- Medizinischen Fakultät Mannheim ausgegeben. TOP vor dem Einsatz an die eigenen Bedingungen In einer Studie wurde eine Gruppe von unerfahre- angepasst werden. nen Prüfenden mit dem Online-Kurs des Ma-TOP geschult (Versuchsgruppe mit N=17) und eine wei- Hierzu zählen folgende Inhalte: tere Gruppe mit einem Online-Dummy-Kurs, der - Online-Kurs für unerfahrene Prüfende lediglich organisatorische Informationen enthielt • Ablauf des OSCE (Kontrollgruppe mit N=14). Am Ende wurden die • Beispielvideo für eine OSCE-Station Prüfenden gebeten, ihren Kurs zu bewerten. Die • Besondere Prüfungsinhalte Analyse zeigte, dass die Teilnehmenden der Ver- • FAQ rund um das Prüfen suchsgruppe den Wissenszuwachs (t(29) = -3,22, • Übung mit Checkliste inkl. Lösung p < 0,05) und die Relevanz (t(29) = -2,29, p < 0,05) - Online-Information für erfahrene Prüfende höher bewerteten als die Teilnehmenden der Kon- • Neuerungen seit dem letzten OSCE trollgruppe. Die Aspekte Vielfalt, inhaltliche Pas- • besondere Probleme des letzten OSCE sung, klare Struktur und gute Navigation waren in • kleines Quiz beiden Gruppen vergleichbar (Schüttpelz-Brauns - Vor-Ort-Präsentation et al., 2019). - Stationsvideos inkl. Checkliste - Beobachtungsbogen Einbettung des Mannheimer Notwendige Anpassungen des Ma-TOP an die Trainings für OSCE-Prüfende standorteigenen OSCE-Bedingungen können nach Rücksprache mit der Leitung der Abteilung für Voraussetzung für den Erfolg von Ma-TOP ist die Medizinische Ausbildungsforschung der Medizini- gute Einbettung und die Kenntlichmachung der schen Fakultät Mannheim der Universität Heidel- Rahmenbedingungen. So sollten z. B. die Zulas- berg vorgenommen werden. sung als Prüferin oder Prüfer nur möglich sein, wenn das Online-Training absolviert wurde. 13
Literatur Biggs, J. (1996). Enhancing teaching through constructive alignment. Higher Education, 32, 347-364. Kauffeld, S. (2016). Nachhaltige Personalentwicklung und Weiterbildung (2. Aufl.). Berlin, Heidelberg: Springer-Verlag. Schüttpelz‐Brauns, K., Nühse, K., Strohmer, R. and Kaden, J.J. (2019). Training OSCE examiners: minimal effort with far‐reaching results. Medical Education, 53(11), 1153-1154. Siebert, H. (2019). Didaktisches Handeln in der Erwachsenenbildung (8. Aufl). Augsburg: Ziel-Verlag. Wigfield, A. & Eccles, J.S. (1992). The development of achievement task values: A theoretical analysis. Developmental Review, 12(3), 265-310. Wigfield, A. & Eccles, J.S. (2000). Expectancy–value theory of achievement motivation. Contemporary Educational Psychology, 25(1), 68-81. 14
Sie können auch lesen