Sonderbeiträge | Special Articles
Weiterbildung | Further Education
J. Jürgens · M. März · J.E. Kämmer · C. Quandt · K. Johanning · K. Hahnenkamp · W. Koppert

Der Progresstest zur Evaluierung der Weiterbildung im Fach Anästhesiologie

Schlüsselwörter Anästhesiologie – Klinische Kompetenz –Bildungskompetenz – Formatives Feedback – Ärztliche Weiterbildung
Keywords Anaesthesiology – Clinical Competence – Educational Measurement – Formative Feedback – Internship and Residency
Zusammenfassung

Feedback ist ein zentrales Element für die Steuerung des Lernprozesses von Ärzten in Weiterbildung auf dem Weg zu einer reifen und professionellen Arztpersönlichkeit. Progresstests stellen ein solches Feedbackinstrument dar.

Sie geben den Lernenden detaillierte Rückmeldung zum aktuellen Wissensstand und der Wissensentwicklung. Einrichtungen erhalten zusammenfassende Ergebnisse. In einem Pilotversuch ist ein Progresstest Anästhesiologie entwickelt worden.
Der Progresstest Anästhesiologie um­fasst 45 Multiple-Choice-Fragen basie­rend auf dem Weiterbildungscurricu­lum der Deutschen Gesellschaft für Anästhesiologie und Intensivmedizin e. V.. Der Test wird digital durchgeführt, ist anonymisiert und hat einen flexiblen Testzeitraum. Die Teilnehmenden und Institutionen erhalten nach Abschluss eine vergleichende Rückmeldung mit unterschiedlichen Detailschwerpunkten. An dem Test nahmen 135 Ärzte von sechs Universitätsklinika teil, von denen 115 (85,2 %) gewertet werden konnten. Mit der Anzahl der Weiterbildungserfahrung steigt die Anzahl beantworteter Fragen und der Anteil der richtig beantworteten Fragen vom 1. Weiterbildungsjahr von 23 (63 %) zum Facharzt auf 34 (80 %). Auch die Sicherheit der Einschätzung steigt mit dem Erfahrungsgrad von 19 (42 %) auf 30 (67 %) sicher beantwor­tete Fragen, gleichzeitig fällt die Un­sicherheit von 8 (18 %) auf 2 (4 %) geratene Antworten. Im Schnitt sind 2 (35 %) der geratenen und 19 (82 %) der sicher beantworteten Fragen richtig. Dieser Anteil unterliegt nur geringen Schwankungen zwischen den Weiterbildungsjahren. Die Fragen verteilen sich nach vorher festgelegter Gewichtung bei einer mittleren Itemschwierigkeit von 0,62 (SD 0,24).
Der Progresstest Anästhesiologie hat sich als Evaluierungstool bewährt und gibt den Teilnehmenden eine gute Ein­schätzung ihres Wissenstands. Darüber hinaus gibt der Test den Weiterbildungsstätten eine Rückmeldung über die Qualität ihrer Wissensvermittlung im Rahmen der Weiterbildung. Er kann so bei der Implementierung von Weiterbildungskatalogen und -ordnungen un­ter­stützen.

Summary

Feedback is a central element for the guidance of postgraduate training of physicians and is important in professional medical personality development. Progress tests give physicians a detailed feedback on their knowledge and further knowledge development, while the in­stitutions also receive a summarised feedback on these issues.

A progress test has now been developed for anaesthe­siology in the scope of a pilot project. The anaesthesiology progress test consists of 45 multiple-choice questions based on the postgraduate training curriculum of the German Society of Anaesthesiology and Intensive Care Medicine. The test was made available online, anonymised and accessible within a flexible time period. After completion of the test participants and institutions received a comparative feedback which focuses on various details. A total of 135 physicians from six uni­versity hospitals took the test, 115 (85.2 %) of the test results were sufficient to be evaluated. The more advanced the participants had been in their training, the more questions they were able to answer – and the more questions were correctly answered by first-year trainees 23 (63 %) and specialists 34 (80 %), re­spectively. In addition, the certainty of answers increased with the level of training from 19 (42 %) to 30 (67 %).
On average, 2 (35 %) of the guessed answers and 19 (82 %) of the questions answered with certainty were correct. Only minor deviations of these percentages have been perceived over the years. Concomitantly, the uncertainty of guessed answers dropped from 8 (18 %) to 2 (4 %). The questions were distributed according to a previously de­termined weighting procedure with a mean item difficulty of 0.62 (SD 0.24). The anaesthesiology progress test has proven successful and gives the partici­-
pants a good feedback of their know­ledge. Furthermore, it provides the institutions with a feedback on the quality of their postgraduate training as regards the development of the participants’ theoretical knowledge. As such, it may contribute to the implementation of training curricula and regulations.

Deutsch