Jahrestagung der Gesellschaft für Medizinische Ausbildung (GMA)
Kommunikative Kompetenzen unter Einsatz von videobasierten Fragen und KI prüfen: Herausforderungen bei der Erstellung und im Review von MC-Fragen
Text
Lernziel: Die Prüfung kommunikativer Kompetenzen stellt eine zentrale Herausforderung in der medizinischen Ausbildung dar. Multiple-Choice-Fragen (MC-Fragen) bieten hier ein standardisiertes, objektives und ressourcenschonendes Format – doch ihre Entwicklung ist anspruchsvoll: Wie lassen sich komplexe kommunikative Situationen valide über MC-Fragen prüfen? Wie vermeidet man typische Fallstricke wie Oberflächlichkeit, Mehrdeutigkeit oder mangelnde Praxisrelevanz? Herausforderungen und Lösungsansätzen werden anhand von Beispielen im Rahmen dieses Workshops thematisiert.
Am Ende des Workshops verfügen die Teilnehmenden über ein vertieftes Verständnis für die spezifischen Anforderungen an und Gütekriterien für MC-Fragen zur Prüfung kommunikativer Kompetenzen. Sie sind in der Lage, eigene Items kritisch zu reflektieren, systematisch mittels Peer- und KI-Feedback zu verbessern und im Team qualitätsgesicherte Fragen zu entwickeln. Die Teilnehmenden haben einen Einblick in konkrete Lösungsansätze, wie videobasierte Kommunikationsfragen und den Einsatz von KI-Tools erhalten.
Ablauf der Veranstaltung mit Zeitplan inkl. eingesetzter didaktischer Methoden:
- Einführung & Identifikation von Herausforderungen (20 Min.): Begrüßung der Teilnehmenden und Vorstellung der Workshop-Leitung; Vorstellungsrunde der Teilnehmenden anhand von Impulsfragen (Welche Herausforderungen mit Kommunikationsfragen haben Sie bisher gehabt? Wie haben Sie diese bisher gelöst?)
- Impulsvortrag (15 Min.): Anhand eines Vortrages werden die Lernziele des Workshops sowie die Herausforderungen bei der Erstellung von MC-Fragen zu Kommunikationsinhalten, von videobasierte MC-Fragen und dem Einsatz von KI im Itemreview und dem Antwortfeedback präsentiert.
- Vorstellung und Analyse von Beispielfragen zu Kommunikationsinhalten (Best-Practice-Beispiele und Problemfälle) (10 Minuten): Am Beispiel von guten und schlechten MC-Fragen zu Kommunikationsinhalten bewerten die Teilnehmenden die Fragen anhand eines vorbereiteten Bewertungsbogens in Einzelarbeit. Die Bewertungen werden nach jeder Frage im Plenum zusammengetragen und diskutiert.
- Erstellen eigener Kommunikationsfragen und Übung zum Review mittels KI (30 Minuten): In Kleingruppen wird entlang eines Videos zu einer Kommunikationssituation eine dazu passende MC-Frage erstellt und voraussichtlich mittels KI-Einsatz gereviewt. Anschließend werden jeweils zwei Kleingruppen zusammengeführt, die sich ihre erstellten Fragen gegenseitig vorstellen und sich wechselseitig Feedback geben.
- Diskussion von Lösungsansätzen für häufige Stolpersteine & Abschluss (15 Minuten): Zusammenfassung der besprochenen Inhalte und Darstellung möglicher Lösungsansätze wie videobasierte Fragen, KI-basierte Fragen, Vignetten-Design etc. Diskussion im Plenum sowie Sammlung weiterer Ideen.
Zielgruppe: Der Workshop richtet sich an alle Lehrenden, Prüfenden und Curriculumsverantwortlichen, die hochwertige Kommunikations-MC-Fragen erstellen und KI im Review und dem Feedback integrieren wollen.
