Jahrestagung der Gesellschaft für Medizinische Ausbildung
Entwicklung einer Bewertungsskala für die Prüfung am Patienten oder an der Patientin
2Justus-Liebig-Universität Gießen, Rudolf-Buchheim-Institut für Pharmakologie, Gießen, Deutschland
Text
Fragestellung/Zielsetzung: Der Referentenentwurf zur neuen ÄApprO [1] sieht die „Prüfung am Patienten oder an der Patientin“ (PaP) als ersten Teil des Dritten Abschnitts der Ärztlichen Prüfung (M3) vor. Für deren Prüfungsbestandteile wurden strukturierte, kompetenzorientierte Bewertungsbögen entwickelt. Im Zuge dieses Arbeitsprozesses stellte sich die Frage, wie unter Berücksichtigung aller Anforderungen eine geeignete Bewertungsskala gestaltet werden kann, um faire und reliable Bewertungen zu ermöglichen.
Methoden: Am IMPP hat eine Arbeitsgruppe mit 19 berufenen Sachverständigen auf Basis zuvor gemeinsam erstellter kompetenzorientierter Bewertungskategorien eine zugehörige Bewertungsskala entwickelt. Hierbei waren durch die Vorgaben des Referentenentwurfs verschiedene Anforderungen zu berücksichtigen, u.a. eine Punktevergabe für jeden Prüfungsbestandteil, die Festlegung einer Bestehensgrenze sowie die Ableitung einer Gesamtnote anhand eines vorgegebenen Notenschemas. Die Bewertung durch die Prüfenden sollte einerseits einfach umsetzbar und möglichst eindeutig sein und andererseits das Endergebnis (Bestehen und Gesamtnote) konsistent abbilden.
In einem iterativen Prozess, der Literaturrecherchen zu arbeitsplatzbasierten Prüfungen, interprofessionelle Diskussionsrunden und Workshops mit Sachverständigen umfasste, wurden verschiedene Entwürfe (u.a. Noten 1-6, 15-Punkte-System der Oberstufe, 4 bis 6-stufige Skala mit oder ohne „0 Punkte“) analysiert und hinsichtlich der o.g. Anforderungen evaluiert.
Ergebnisse: Als Resultat des Entwicklungsprozesses entstand eine 5-stufige Bewertungsskala (0-4 Punkte, siehe Abbildung 1a [Fig. 1]). Um den Bezug der zu vergebenden Punkte konsistent zu Bestehensgrenze und Notenvergabe zu gestalten, wurde eine farbliche Kennzeichnung im Ampelsystem gewählt. 4 Punkte entsprechen dabei der maximal erreichbaren Punktzahl je Kompetenzkategorie. 2 Punkte sind in der Skala gelb gekennzeichnet und entsprechen einer grenzwertigen Leistung. Die Möglichkeit der Vergabe von 0 Punkten wurde bewusst in die Skala aufgenommen, um auch besonders schwache Leistungen (z.B. mögliches Risiko eines Gesundheitsschadens im Rahmen der Patientenversorgung) dokumentieren zu können.
Abbildung 1: Bewertungsskala für die „Prüfung am Patienten oder an der Patientin“ (PaP) a) Beispielhafter Auszug aus den strukturierten Bewertungsbögen der PaP. b) Simulation der Gesamtnote bei Festlegung einer Bestehensgrenze von 50% und ausschließlicher Vergabe des jeweiligen Punktewertes in allen Prüfungsbestandteilen.
Diskussion: Der derzeitige Skalenentwurf bildet unter Berücksichtigung der Rahmenbedingungen den Bezug zur Bestehensgrenze ab. Zusammen mit der Farbgebung wird den Prüfenden eine Orientierung zur Bedeutung der Punktewerte aufgezeigt, um eine reliable Bewertung zu ermöglichen. Wünschenswert wäre eine zusätzliche sprachliche Spezifizierung der Punktewerte. Dies ist besonders für die Punktewerte 1, 3 und 4 anspruchsvoll, da der Bezug zur späteren Gesamtnote berücksichtigt werden muss (siehe Abbildung 1b [Fig. 1]). Bezeichnungen müssen hier mit Bedacht gewählt werden und sind Gegenstand aktueller Überlegungen. Eine derzeit laufende Pilotierung der PaP wird erste Anhaltspunkte zur Praktikabilität und Zuverlässigkeit der Bewertungsskala liefern.
