Purpose: This report describes the essential steps in the development, implementation, evaluation and quality assurance of the written part of the Swiss Federal Licensing Examination for Human Medicine (FLE) and the insights gained since its introduction in 2011.
Methods: Based on existing scientific evidence, international expertise, and experience gained from previous examinations, the FLE is developed by experts from all five medical faculties in Switzerland with the support of the Institute for Medical Education and is held simultaneously at five locations. The exam organisers document and review every examination held and continuously optimise the processes; they have summarised the results in this report.
Results: The essential steps comprise the development, revision and translation of questions; construction of the exam and production of materials; candidate preparation; implementation and analysis. The quality assurance measures consist of guideline coherence in the development of the questions and implementation of the exam, revision processes, construction of the exam based on the national blueprint, multiphase review of the translations and exam material, and statistical analysis of the exam and the comments from candidates. The intensive collaboration, especially on the part of representatives from all the participating faculties and a central coordination unit, which provides methodological support throughout and oversees the analysis of the exam, has proven successful. Successfully completed examinations and reliable results in the eleven examinations so far implemented represent the outcomes of the quality assurance measures. Significant insights in recent years are the importance of appreciating the work of those involved and the central organisation of exam development, thus ensuring the long-term success of the process.
Conclusion: Common guidelines and workshops, quality assurance measures accompanied by the continuous improvement of all processes, and appreciation of everyone involved, are essential to carrying out such an examination at a high-quality level in the long term.
Zielsetzung: Dieser Bericht beschreibt die zentralen Schritte der Erstellung, Durchführung, Auswertung und Qualitätssicherung des schriftlichen Teils der eidgenössischen Prüfung Humanmedizin (Schweizer Staatsexamen) sowie die seit deren Einführung 2011 gewonnenen Erkenntnisse.
Methodik: Die eidgenössische Prüfung wird auf Basis vorhandener wissenschaftlicher Evidenz, internationaler Expertise sowie Erfahrungen aus vorhergehenden Prüfungen durch Experten aller fünf Medizinischen Fakultäten der Schweiz mit Unterstützung des Instituts für medizinische Lehre erstellt und gleichzeitig an fünf Standorten durchgeführt. Die Prüfungsorganisatoren dokumentieren und reflektieren jede Prüfungsdurchführung, optimieren die Prozesse kontinuierlich und haben die Ergebnisse in diesem Bericht zusammengefasst.
Ergebnisse: Die zentralen Schritte umfassen: Fragenerstellung, -revision, -übersetzung; Prüfungszusammenstellung und Materialherstellung; Kandidatenvorbereitung; Prüfungsdurchführung und -auswertung. Die Qualitätssicherungsmassnahmen bestehen aus Richtlinienkohärenz bei der Fragenerstellung und Prüfungsdurchführung, Revisionsprozessen, Prüfungszusammenstellung auf Basis des nationalen Blueprints, mehrstufiger Überprüfung der Übersetzungen und des Prüfungsmaterials sowie der statistischen Auswertung der Prüfung und der Kandidatenkommentare. Bewährt hat sich dabei die enge Zusammenarbeit insbesondere von Vertretern aller beteiligten Fakultäten sowie einer zentralen Koordinationsstelle, die sämtliche Schritte methodisch begleitet und sich um die Auswertung der Prüfung kümmert. Die Endergebnisse der Qualitätssicherungsmassnahmen sind erfolgreiche Prüfungsdurchführungen und reliable Ergebnisse in den bisher elf so durchgeführten Prüfungen. Wichtige Erkenntnisse der vergangenen Jahre sind die Bedeutung der Wertschätzung der Arbeit der Beteiligten und die zentrale Organisation der Prüfungserstellung, um den Prozess langfristig erfolgreich durchzuführen.
Schlussfolgerung: Um eine solche Prüfung langfristig mit hoher Qualität durchzuführen, sind gemeinsame Richtlinien und Workshops, Qualitätssicherungsmassnahmen mit fortlaufender Verbesserung aller Prozesse sowie die Wertschätzung der Beteiligten zentral.
Keywords: licensing examination; multiple choice; national final examination; summative assessment.
Copyright © 2022 Schurter et al.