25gma013 10.3205/25gma013 urn:nbn:de:0183-25gma0135 Meeting Abstract Eißner Eißner Alexander A

Universität Augsburg, Department of Medical Education Augsburg (DEMEDA), Augsburg, Deutschland Universitätsklinikum Augsburg, IV. Medizinische Klinik, Augsburg, Deutschland

author Siefert Siefert Stefanie S

Universität Augsburg, Department of Medical Education Augsburg (DEMEDA), Augsburg, Deutschland

author Heinrich Heinrich Marie M

Universität Augsburg, Department of Medical Education Augsburg (DEMEDA), Augsburg, Deutschland

author Georg Georg Waltraud W

Universität Augsburg, Department of Medical Education Augsburg (DEMEDA), Augsburg, Deutschland

author Schindler Schindler Christoph C

Universität Augsburg, Department of Medical Education Augsburg (DEMEDA), Augsburg, Deutschland

author Joachimski Joachimski Felix F

Universität Augsburg, Department of Medical Education Augsburg (DEMEDA), Augsburg, Deutschland Universitätsklinikum Augsburg, Klinik Diagnostische und Interventionelle Neuroradiologie, Augsburg, Deutschland

author Krapp Krapp Nicolas N

Universität Augsburg, Department of Medical Education Augsburg (DEMEDA), Augsburg, Deutschland Universitätsklinikum Augsburg, III. Medizinische Klinik, Augsburg, Deutschland

author German Medical Science GMS Publishing House

Düsseldorf

610 20250908 germ This is an Open Access article distributed under the terms of the Creative Commons Attribution 4.0 License. Dieser Artikel ist ein Open-Access-Artikel und steht unter den Lizenzbedingungen der Creative Commons Attribution 4.0 License (Namensnennung). M0626 013 Jahrestagung der Gesellschaft für Medizinische Ausbildung (GMA) V-02 Kompetenz-orientierte Prüfungen Düsseldorf 20250908 20250910 V-02-05 TextZielsetzung: Mit Entrustable Professional Activities (EPAs) lassen sich ärztliche Tätigkeiten und der Grad der erforderlichen Supervision erfassen. Medizinstudierende übernehmen mit steigendem Kompetenzzuwachs zunehmend Tätigkeiten unter nachlassender Supervision. Die Beurteilung dieser Kompetenz ist komplex. Während Punktescores im Objective Structured Clinical Examination (OSCE) etabliert sind, gewinnt die Festlegung des notwendigen Supervisionslevels (SVL) an Bedeutung, um die schrittweise Übernahme von EPAs im Praktischen Jahr (PJ) abzubilden . Dieser Beitrag diskutiert, inwiefern SVL in Prüfungssettings integriert werden können und welche Fragen sich aus ersten Datenerhebungen im PJ-Reife OSCE ergeben.Methoden & Überlegungen zur Messbarkeit: Während Punktescores vordefinierte Kriterien zur Beurteilung der Performanz nutzen, basieren SVL auf einer umfassenden Einschätzung der Eigenständigkeit unter Berücksichtigung der erforderlichen Supervision. Im PJ-Reife OSCE an der Medizinischen Fakultät Augsburg im WiSe 2024/25 wurden neben der Global Rating Skala testweise SVL erhoben.Es ermöglicht eine Reflexion über die Aussagekraft beider Methoden:Sind Punktescores ausreichend, um die Eigenständigkeit der Studierenden zu erfassen?Beruhen SVL auf einer umfassenderen Einschätzung, die auch Vertrauen und intuitive Faktoren einbezieht?Bieten SVL eine flexiblere, kontextangepasste Bewertung oder verringern sie die Reliabilität ?Diskussion: Erste Analysen zeigen eine stationsabhängige Korrelation zwischen Punktescores und SVL. An standardisierten Prüfungsstationen, wie der Präventionsberatung zu kardiovaskulären Risikofaktoren, zeigte sich eine höhere Übereinstimmung, während an interaktions- und entscheidungsbasierten Stationen, wie der Patient:innenvisite, größere Diskrepanzen bestanden.Die Reliabilitätsanalyse zeigt für Punktescores eine höhere Konsistenz (Cronbach’s Alpha=0,65) als für SVL (0,54). Dies könnte darauf hindeuten, dass Prüfende zusätzliche, in den Bewertungskriterien nicht erfasste Faktoren einbeziehen . Die Bewertung der Eigenständigkeit erfordert neben formalen Kriterien eine subjektive Einschätzung der Prüfenden. Subjektivität ist dabei kein Defizit, sondern essenziell für eine umfassende Beurteilung ärztlicher Kompetenzen .Ausblick: Eine detaillierte Analyse der Daten und qualitative Befragungen der Prüfenden sind geplant. Besonders relevant sind Stationen mit großen und kleinen Diskrepanzen zwischen Punktescore und SVL, um zu untersuchen, welche Kriterien Prüfende in Entscheidung einbeziehen. Zudem stellt sich die Frage, wie Assessment-Ergebnisse – insbesondere der PJ-Reife OSCE – im Verlauf des PJ genutzt werden können.Take Home Message:Punktescores weisen eine höhere Reliabilität als SVL auf, was auf unterschiedliche Bewertungslogiken hindeuten könnte.Die Herausforderung besteht darin, eine Balance zwischen standardisierten Bewertungsmaßstäben und der notwendigen Subjektivität für kontextbezogene SVL zu finden. Ten Cate O Entrustment as assessment: Recognizing the ability, the right, and the duty to act 2016 J Grad Med Educ 261-262 Ten Cate O. Entrustment as assessment: Recognizing the ability, the right, and the duty to act. J Grad Med Educ. 2016;8(2):261-262. DOI: 10.4300/JGME-D-16-00097.1 http://dx.doi.org/10.4300/JGME-D-16-00097.1 Norcini J Burch V Workplace-based assessment as an educational tool: AMEE Guide No. 31 2007 Med Teach 855-871 Norcini J, Burch V. Workplace-based assessment as an educational tool: AMEE Guide No. 31. Med Teach. 2007;29(9-10):855-871. DOI: 10.1080/01421590701775453 http://dx.doi.org/10.1080/01421590701775453 Rotthoff T Standing up for subjectivity in the assessment of competencies 2018 GMS J Med Educ Doc29 Rotthoff T. Standing up for subjectivity in the assessment of competencies. GMS J Med Educ. 2018;35(3):Doc29. DOI: 10.3205/zma001175 http://dx.doi.org/10.3205/zma001175 0 0 0 0