Das niederländische Weiterbildungssystem in Aachen – nur wenige Kilometer oder Welten entfernt? Ergebnisse einer Machbarkeitsstudie

Zusammenfassung

Einleitung Die Systeme der chirurgischen Weiterbildung unterscheiden sich welt- und auch europaweit stark. Im Rahmen des European Surgical Centers Aachen Maastricht ist unsere Klinik eng mit der chirurgischen Klinik der Maastrichter Uniklinik verbunden. Hierdurch werden die Unterschiede in der chirurgischen Weiterbildung besonders deutlich. In den Niederlanden findet nach jeder Operation eines Weiterbildungsassistenten (WBA) strukturiertes Feedback nach dem OSATS-Prinzip (Objective Structured Assessment of Technical Skills) statt. Ziel dieser Studie war es, das OSATS-Konzept aus Maastricht auch im Aachener Teil des European Surgical Centers Aachen Maastricht einzuführen und die Umsetzbarkeit sowie den Wert für die Weiterbildung zu evaluieren.

Material und Methoden Für die Dauer von 3 Monaten wurde das OSATS-Feedbacksystem in unserer Klinik im Rahmen einer prospektiven Probandenstudie evaluiert. Sieben von 10 WBA, die sich während der Studie in einer Rotation innerhalb unserer Kernklinik befanden, nahmen an der Studie teil (70%). Von den teilnehmenden WBA bekam die Hälfte nach jeder vollständig selbst durchgeführten Operation schriftliches Feedback durch den Ausbilder. Zusätzlich wurde, ebenso wie in der Kontrollgruppe, eine Eigenevaluation nach dem OSATS-System durchgeführt. Primärer Endpunkt war die Umsetzbarkeit des OSATS-Systems, sekundäre Endpunkte waren der Nutzen für die WBA sowie die Unterschiede zwischen Selbst- und Fremdevaluation.

Ergebnisse Das OSATS-System ließ sich einfach in unserer Klinik umsetzen und wurde gut akzeptiert. Durchschnittlich wurden nach 70% der Operationen Feedback-Bögen ausgefüllt. Die Fremdevaluation wurde als sehr nützlich empfunden, die Selbstevaluation dagegen weniger. Das Ausfüllen der Bögen wurde als nicht zeitintensiv bewertet (unter 3 Minuten) und die Mehrzahl der WBA (86%) befürworten eine dauerhafte Einführung des OSATS-Systems in unserer Klinik.

Schlussfolgerung Das OSATS-System ist eine Möglichkeit, während der chirurgischen Weiterbildung strukturiertes Feedback zum Ausbildungsstand und zu nächsten Schritten geben zu können. Es kann einfach in die chirurgische Weiterbildung in Deutschland integriert werden. Eine schriftliche Evaluation durch den Ausbildenden wird von den WBA als sehr nützlich empfunden.

Abstract

Introduction Education for residents in surgery varies not only throughout the world, but also throughout Europe. Our clinic is well connected to Maastricht University Medical in Centre in the Netherlands (European Surgical Centre Aachen Maastricht). On the other hand, there are clear differences in resident programs. In the Netherlands, a structured feedback according to the OSATS concept (Objective Structured Assessment of Technical Skills) is mandatory after every operation performed by residents. The aim of the present study was to transfer the OSATS concept from Maastricht to Aachen and to evaluate the feasibility and benefits of this concept for surgical education.

Material and Methods The OSATS concept was implemented for 3 months in our clinic within a prospective clinical trial. Seven out of 10 residents that were working in our clinic at that time participated in the study (70%). Half of these were assigned to structured written feedback after every autonomously performed operation. Additionally, all participants performed structured written proper feedback according to the OSATS concept. The primary endpoint was the feasibility of the OSATS concept in our clinic; secondary endpoints were the benefits for the residents and the differences between external and self-evaluation.

Results The OSATS-concept was easily implemented in our clinic and met wide acceptance. Evaluation was performed after a mean of 70% of operations. External evaluation was regarded as more beneficial for residents than self-evaluation. Structured written evaluation according to the OSATS concept was not time-consuming (< 3 minutes) and most residents (86%) supported permanent implementation of the OSATS concept in our clinic.

Conclusion The OSATS concept is a suitable approach to provide structured feedback to residents in continuous education. It can easily be implemented in resident education in Germany. Structured, written feedback by senior physicians is perceived as beneficial by residents.

Schlüsselwörter

chirurgische Weiterbildung - Weiterbildungskonzept - OSATS - Facharztweiterbildung

Key words

surgical education - resident education - OSATS

• Literatur

• 1 Weggemans MM, van Dijk B, van Dooijeweert B. et al. The postgraduate medical education pathway: an international comparison. GMS J Med Educ 2017; 34: Doc63 doi:10.3205/zma001140
• 2 van der Vleuten C, Verhoeven B. In-training assessment developments in postgraduate education in Europe. ANZ J Surg 2013; 83: 454-459 doi:10.1111/ans.12190
• 3 Roeth AA. What can we learn from other countries-lessons from the CAJC Happiness Report. Innov Surg Sci 2019; 4: 25-29 doi:10.1515/iss-2018-0032
• 4 Sargeant J, Armson H, Chesluk B. et al. The processes and dimensions of informed self-assessment: a conceptual model. Acad Med 2010; 85: 1212-1220 doi:10.1097/ACM.0b013e3181d85a4e
• 5 Teunissen PW, Boor K, Scherpbier AJ. et al. Attending doctorsʼ perspectives on how residents learn. Med Educ 2007; 41: 1050-1058 doi:10.1111/j.1365-2923.2007.02858.x
• 6 Holmboe ES. Faculty and the observation of traineesʼ clinical skills: problems and opportunities. Acad Med 2004; 79: 16-22 doi:10.1097/00001888-200401000-00006
• 7 Roeth AA, Mille M. [What Do Young Surgeons Want? Modern Requirements for Senior Surgeons]. Zentralbl Chir 2018; 143: 50-54 doi:10.1055/s-0043-122678
• 8 Boerebach BC, Arah OA, Heineman MJ. et al. The impact of resident- and self-evaluations on surgeonʼs subsequent teaching performance. World J Surg 2014; 38: 2761-2769 doi:10.1007/s00268-014-2655-3
• 9 van Hove PD, Tuijthof GJ, Verdaasdonk EG. et al. Objective assessment of technical surgical skills. Br J Surg 2010; 97: 972-987 doi:10.1002/bjs.7115
• 10 Martin JA, Regehr G, Reznick R. et al. Objective structured assessment of technical skill (OSATS) for surgical residents. Br J Surg 1997; 84: 273-278 doi:10.1046/j.1365-2168.1997.02502.x
• 11 Hiemstra E, Kolkman W, Wolterbeek R. et al. Value of an objective assessment tool in the operating room. Can J Surg 2011; 54: 116-122 doi:10.1503/cjs.032909
• 12 Niitsu H, Hirabayashi N, Yoshimitsu M. et al. Using the Objective Structured Assessment of Technical Skills (OSATS) global rating scale to evaluate the skills of surgical trainees in the operating room. Surg Today 2013; 43: 271-275 doi:10.1007/s00595-012-0313-7
• 13 Faulkner H, Regehr G, Martin J. et al. Validation of an objective structured assessment of technical skill for surgical residents. Acad Med 1996; 71: 1363-1365 doi:10.1097/00001888-199612000-00023
• 14 Goff B, Mandel L, Lentz G. et al. Assessment of resident surgical skills: is testing feasible?. Am J Obstet Gynecol 2005; 192: 1331-1338 doi:10.1016/j.ajog.2004.12.068
• 15 Kramp KH, van Det MJ, Hoff C. et al. Validity and reliability of global operative assessment of laparoscopic skills (GOALS) in novice trainees performing a laparoscopic cholecystectomy. J Surg Educ 2015; 72: 351-358 doi:10.1016/j.jsurg.2014.08.006
• 16 Bundesärztekammer. (Muster-)Weiterbildungsordnung 2018 in der Fassung vom 28.04.2020. Im Internet (Stand: 29.09.2020): https://www.bundesaerztekammer.de/fileadmin/user_upload/downloads/pdf-Ordner/Weiterbildung/20200428_MWBO_2018.pdf
• 17 Beard JD. Education and Training Committee of the Vascular Society of Great Britain and Ireland. Setting standards for the assessment of operative competence. Eur J Vasc Endovasc Surg 2005; 30: 215-218 doi:10.1016/j.ejvs.2005.01.032
• 18 Beard JD, Jolly BC, Newble DI. et al. Assessing the technical skills of surgical trainees. Br J Surg 2005; 92: 778-782 doi:10.1002/bjs.4951
• 19 Hodges BD, Martimianakis MA, McNaughton N. et al. Medical education … meet Michel Foucault. Med Educ 2014; 48: 563-571 doi:10.1111/medu.12411
• 20 Roeth AA, Geis C, Hartmann D. et al. Die Chirurgische Arbeitsgemeinschaft Junge Chirurgen (CAJC) stellt sich vor. Allgemein- und Viszeralchirurgie up2date 2020; 14: 135-150 doi:10.1055/a-0990-0180
• 21 McKendy KM, Watanabe Y, Lee L. et al. Perioperative feedback in surgical training: A systematic review. Am J Surg 2017; 214: 117-126 doi:10.1016/j.amjsurg.2016.12.014
• 22 Vaidya A, Aydin A, Ridgley J. et al. Current Status of Technical Skills Assessment Tools in Surgery: A Systematic Review. J Surg Res 2020; 246: 342-378 doi:10.1016/j.jss.2019.09.006
• 23 Robertson RL, Park J, Gillman L. et al. The impact of rater training on the psychometric properties of standardized surgical skill assessment tools. Am J Surg 2020; DOI: 10.1016/j.amjsurg.2020.01.019.
• 24 Hopmans CJ, den Hoed PT, van der Laan L. et al. Assessment of surgery residentsʼ operative skills in the operating theater using a modified Objective Structured Assessment of Technical Skills (OSATS): a prospective multicenter study. Surgery 2014; 156: 1078-1088 doi:10.1016/j.surg.2014.04.052