Jahrestagung der Gesellschaft für Medizinische Ausbildung (GMA)
Jahrestagung der Gesellschaft für Medizinische Ausbildung (GMA)
Echtzeit-Feedback im Kommunikationstraining: Evaluierung eines Chatbots basierend auf künstlicher Intelligenz (KI) für Ärzt*innen
Text
Hintergrund/Fragestellung: Kommunikation ist ein wesentlicher Bestandteil der medizinischen Versorgung, insbesondere angesichts der steigenden Prävalenz psychischer Erkrankungen [1]. Die Schulung von Ärzt*innen in der Primärversorgung in den Bereichen Psychosomatik und Kommunikation ist daher von entscheidender Bedeutung. Feedback ist für die Förderung der Kommunikationsfähigkeiten essenziell, jedoch stellt die praktische Implementierung häufig eine Herausforderung dar [2]. KI-basierte Tools bieten vielversprechende Möglichkeiten, Ärzt*innen bei der Entwicklung kommunikativer Fähigkeiten zu unterstützen [3].
Methoden: Diese Proof-of-Concept-Studie evaluiert einen KI-basierten Chatbot, der Ärzt*innen in Echtzeit Feedback zu Kommunikationstechniken liefert. Konkret wurde Präzision und Wahrnehmung des KI-generierten Feedbacks, Einfluss auf die Häufigkeit der Anwendung spezifischer Kommunikationstechniken sowie der wahrgenommene Nutzen im klinischen Alltag untersucht. 28 Ärzt*innen absolvierten zwei Chats mit KI-simulierten Patient*innen und erhielten währenddessen und danach KI-generiertes Feedback zu ihrer Kommunikation. Insgesamt gingen so 56 anonymisierte Transkripte segmentiert in Frage-Antwort-Paare in die Auswertung ein. Analysiert wurden Feedback-Genauigkeit, Benutzererfahrungen, Veränderungen im Kommunikationsverhalten sowie wahrgenommener klinischer Nutzen nach 6 Monaten. Der Einfluss des KI-Feedbacks wurde anhand der Häufigkeit eingesetzter Kommunikationstechniken mittels Poisson-Regressionen untersucht.
Ergebnisse: Das KI-generierte Feedback war weitgehend zutreffen (85,4%) und wurde auch von den Teilnehmer*innen als zutreffend (82,1%) und hilfreich (85,7%) bewertet. Die Anwendung der Kommunikationstechniken stieg im zweiten Chat deutlich, was den Nutzen des Feedbacks unterstrich. Nach 6 Monaten berichtete die Mehrheit der Teilnehmer*innen von häufigerem Einsatz der Kommunikationstechniken, verbesserter Arzt-Patient-Kommunikation und leichterer Erkennung psychischer Erkrankungen.
Diskussion: Zusammenfassend verdeutlicht diese Proof-of-Concept Studie das Potenzial von KI-gestütztem Training und Feedback zur Verbesserung der Kommunikation bei Ärzt*innen. Das KI-Feedback erwies sich als zuverlässig und hilfreich und steigerte die Anwendung spezifischer Kommunikationstechniken. Teilnehmer*innen berichteten nach 6 Monaten von vielseitigem Nutzen im klinischen Alltag. Trotz begrenzter Darstellungsmöglichkeiten komplexer Patientensituationen ist textbasierte KI durch Verfügbarkeit, Wiederholbarkeit und Standardisierung eine wertvolle Ergänzung im Kommunikationstraining.
Take-Home-Messages: KI-gestütztes Training und Feedback kann Ärzt*innen zentrale Kommunikationstechniken vermitteln und so zur psychosomatischen Versorgung bei steigendem Bedarf beitragen. Skalierbarkeit, Verfügbarkeit und Konsistenz machen KI-basierte Übungs- und Feedbackformate zu einer wertvollen Ergänzung klassischer Lehr- und Weiterbildungsangebote.
Literatur
[1] Fritzsche K, Schweickhardt A. Ärztliche Gesprächsführung. In: Fritzsche K, Wirsching M, editors. Basiswissen Psychosomatische Medizin und Psychotherapie. Berlin, Heidelberg: Springer; 2020. P.57-69. DOI: 10.1007/978-3-662-61425-9_5[2] Hattie J, Timperley H. The Power of Feedback. Rev Educ Res. 2007;77(1):81-112. DOI: 10.3102/003465430298487
[3] Holderried F, Stegemann-Philipps C, Herschbach L, Moldt JA, Nevins A, Griewatz J, Holderried M, Herrmann-Werner A, Festl-Wietek T, Mahling M. A Generative Pretrained Transformer (GPT)-Powered Chatbot as a Simulated Patient to Practice History Taking: Prospective, Mixed Methods Study. JMIR Med Educ. 2024;10(1):e53961. DOI: 10.2196/53961



