Search

Background: Only a few studies with small sample sizes have compared electronic Objective Structured Clinical Examination (OSCE) rating checklists with traditional paper-based OSCE rating checklists. In this study, the examiner-perceived usability and preference for type of OSCE checklist (electronic vs. paper based) were compared, and the influence of OSCE checklist type on missed ratings was determined, for the Swiss Federal Licensing Examination in clinical skills for human medicine.Methods: All examiners in the Swiss Federal Licensing Examination in clinical skills for human medicine were invited over two subsequent years to evaluate the OSCE checklist type they had worked with during the examination. This was based on a questionnaire with 14 closed questions (i.e., demographic, checklist-type experience, perceived usability, checklist type preference). Furthermore, the numbers of missed ratings for the paper-based checklist were recorded.Results: The data from these examiners (n =377) with experience of both OSCE checklist types were analyzed. The electronic OSCE checklist was rated significantly higher on all usability aspects (i.e., ease of use, candidate rating and error correction, clarity, distraction using the checklist, overall satisfaction), except for the speed of registering comments (no significant difference). The majority of the examiners in both years (2014: 54.5%, n =60, 2015: 89.8%, n =230) reported preference for working with the electronic OSCE checklist in the future. Missed ratings were seen for 14.2% of the paper-based OSCE checklists, which were prevented with the electronic OSCE checklists.Conclusions: Electronic OSCE checklists were rated significantly more user-friendly and were preferred over paper-based OSCE checklists by a broad national sample of examiners, supporting previous results from faculty-level examinations. Furthermore, missed ratings were prevented with the electronic OSCE checklists. Overall, the use of electronic OSCE checklists is therefore advisable. Hintergrund: Nur wenige Studien mit kleinen Stichprobengrößen haben elektronische OSCE-Checklisten (Objective Structured Clinical Examination) mit traditionellen OSCE-Checklisten in Papierform verglichen. In dieser Studie wurden die von Prüfenden wahrgenommene Usability und Präferenz für den OSCE-Checklisten-Typ (elektronisch vs. papierbasiert) verglichen und der Einfluss des OSCE-Checklisten-Typs auf fehlende Bewertungen ermittelt für die Eidgenössische Clinical Skills-Prüfung Humanmedizin in der Schweiz.Methode: Die Prüfenden der Eidgenössischen Clinical Skills-Prüfung Humanmedizin wurden in zwei aufeinanderfolgenden Jahren gebeten, den OSCE-Checklisten-Typ zu bewerten, mit dem sie während der Prüfung gearbeitet hatten. Dies geschah anhand eines Fragebogens mit 14 geschlossenen Fragen (demographische Angaben, Erfahrung mit dem Checklisten-Typ, wahrgenommene Usability, Präferenz für den Checklisten-Typ). Außerdem wurde die Anzahl der fehlenden Bewertungen bei der papierbasierten Checkliste erfasst.Resultate: Die Daten derjenigen Prüfenden (n=377) mit Erfahrung mit beiden OSCE-Checklisten-Typen wurden ausgewertet. Die elektronische OSCE-Checkliste wurde bei allen Aspekten der Usability (einfache Benutzung, Kandidierendenbewertung und Fehlerkorrektur, Übersichtlichkeit, Ablenkung bei der Verwendung der Checkliste, Gesamtzufriedenheit) signifikant besser bewertet, mit Ausnahme der Geschwindigkeit des Erfassens von Kommentaren (kein signifikanter Unterschied). Die Mehrheit der Prüfenden in beiden Jahren (2014: 54.5%, n=60, 2015: 89.8%, n=230) gab an, in Zukunft lieber mit der elektronischen OSCE-Checkliste arbeiten zu wollen. Bei 14.2% der papierbasierten OSCE-Checklisten wurden fehlende Bewertungen festgestellt, welche mit elektronischen OSCE-Checklisten vermieden werden konnten.Schlussfolgerungen: Elektronische OSCE-Checklisten wurden von einer breiten nationalen Stichprobe von Prüfenden als deutlich benutzerfreundlicher eingestuft und gegenüber OSCE-Checklisten auf Papier bevorzugt, was frühere Ergebnisse von Prüfungen auf Fakultätsebene bestätigt. Außerdem wurden mit den elektronischen OSCE-Checklisten fehlende Bewertungen vermieden. Insgesamt ist die Verwendung elektronischer OSCE-Checklisten daher empfehlenswert.

INTRODUCTION Multisource feedback (MSF), also called 360-degree assessment, is one form of assessment used in postgraduate training. However, there is an ongoing discussion on its value, since the factors which influence the impact of MSF and the main impact of MSF are not fully understood. In this study, we investigated both the influencing factors and the impact of MSF on residency training. METHODS We conducted a qualitative case study within the boundaries of the residency training for paediatricians and paediatric surgeons at a University Hospital. We collected data from seven focus group interviews with stakeholders of MSF (residents, raters, supervisors). By performing a reflexive thematic analysis, we extracted the influencing factors and the impact of MSF. RESULTS We found seven influencing factors: MSF is facilitated by the announcement of a clear goal of MSF, the training of raters on the MSF instrument, a longitudinal approach of observation, timing not too early and not too late during the rotation, narrative comments as part of the ratings, the residents' self-assessment, and a supervisor from the same department. We found three themes on the impact of MSF: MSF supports the professional development of residents, enhances interprofessional teamwork, and increases the raters' commitment to the training of residents. CONCLUSION This study illuminates the influencing factors and impact of MSF on residency training. We offer novel recommendations on the continuity of observation, the timing during rotations, and the role of the supervisor. Moreover, by discussing our results through the lens of identity formation theory, this work advances our conceptual understanding of MSF. We propose identity formation theory as a framework for future research on MSF to leverage the potential of MSF in residency training.

Fragestellung/Zielsetzung: Anvertraubare professionelle Tätigkeiten (APTs) werden aktuell in mehreren Ländern für die Entwicklung kompetenz-basierter Curricula in der medizinischen Ausbildung eingeführt [ref:1]. Bislang liegen Studien vor allem aus Sicht der Lehrenden [zum vollständigen Text gelangen Sie über die oben angegebene URL]

Einleitung: Die Gesellschaft für medizinische Ausbildung (GMA) hat sich zum Ziel gesetzt die Lehre in der medizinischen Aus- und Weiterbildung zu professionalisieren [ref:1]. Trotz der zunehmenden Professionalisierung der Medizinischen Ausbildung [ref:2] und Abgrenzung [zum vollständigen Text gelangen Sie über die oben angegebene URL], Gemeinsame Jahrestagung der Gesellschaft für Medizinische Ausbildung (GMA), des Arbeitskreises zur Weiterentwicklung der Lehre in der Zahnmedizin (AKWLZ) und der Chirurgischen Arbeitsgemeinschaft Lehre (CAL)

Lernziel: Die medizinische Lehre unterliegt einem kontinuierlichen Wandel, ebenso werden die Themen der Ausbildungsforschung den aktuellen politischen Forderungen, gesellschaftspolitischen Entwicklungen und wissenschaftlichen Erkenntnissen angepasst und novelliert. Wesentlich für eine qualitätsgesicherte [zum vollständigen Text gelangen Sie über die oben angegebene URL]

Fragestellung/Zielsetzung: Für anvertraubare professionelle Tätigkeiten (APTs) in der medizinischen Ausbildung werden Supervisionsskalen verwendet, die den Grad der Supervisionsintensität messen sollen [ref:1]. Derzeit liegen kaum Studien zum Einsatz solcher Supervisionsskalen [zum vollständigen Text gelangen Sie über die oben angegebene URL]

Fragestellung/Zielsetzung: Obwohl der*die Patient*in im Mittelpunkt der ärztlichen Behandlung oder Pflege steht, fehlt die Patient*Innenperspektive häufig in der Bewertung der ärztlichen und pflegerischen Fähigkeiten von Studierenden. Um eine solche Bewertung [zum vollständigen Text gelangen Sie über die oben angegebene URL]

Additional file 2. Interview guide.

Additional file 1. The coding frame.

Severin Pinilla, 1, 2 Andrea Cantisani, 3 Stefan Klöppel, 1 Werner Strik, 3 Christoph Nissen, 3 Sören Huwendiek 2 1University Hospital of Old Age Psychiatry and Psychotherapy, University of Bern, Bern, Switzerland; 2Institute for Medical Education, Department for Assessment and Evaluation, University of Bern, Bern, Switzerland; 3University Hospital of Psychiatry and Psychotherapy, University of Bern, Bern, SwitzerlandCorrespondence: Severin Pinilla Email severin.pinilla@upd.unibe.ch Thank you for the opportunity to respond to the observations of Oliveira et al. Wefully agree with their recommendations for further study of higher educationaloutcomes when implementing and developing the use of a learning managementsystem (LMS) in clinical learning environments. As the authors correctly noted, ourstudy focused on an early phase of an educational design research study cycle,1 andwe primarily used student evaluations as outcome parameters. Importantly, ourconclusion that using an LMS appeared to support student learning was not basedon a single Likert item, but also on the improvement of our teaching hospital’soverall ranking. This ranking was calculated based on a 30-item evaluation thatincluded questions on perceptions of learning goal achievements, educational supportand learning climate, workplace-based assessments, global evaluation items,and narrative student feedback. It was administered through an external evaluationdepartment at our University; therefore, the details were not included in our data. View the original paper by Pinella and colleagues This is in response to the Letter to the Editor

Objective To describe and evaluate a consensus finding and expert validation process for the development of patient-centred communication assessments for a national Licensing Exam in Medicine. Methods A multi-professional team of clinicians and experts in communication, assessment and role-play developed communication assessments for the Swiss Federal Licensing Examination. The six-month process, informed by a preceding national needs-assessment, an expert symposium and a critical literature review covered the application of patient-centred communication frameworks, the development of assessment guides, concrete assessments and pilot-tests. The participants evaluated the process. Results The multiple-step consensus process, based on expert validation of the medical and communication content, led to six high-stakes patient-centred communication OSCE-assessments. The process evaluation revealed areas of challenge such as calibrating rating-scales and case difficulty to the graduates’ competencies and integrating differing opinions. Main success factors were attributed to the outcome-oriented process and the multi-professional exchange of expertise. A model for developing high stakes patient-centred communication OSCE-assessments was derived. Conclusions Consensus finding was facilitated by using well-established communication frameworks, by ensuring outcome-orientated knowledge exchange among multi-professional experts, and collaborative validation of content through experts. Practice implications We propose developing high-stakes communication assessments in a multi-professional expert consensus and provide a conceptual model. Keywords Assessment Federal licensing examination Patient-centred communication

Introduction: To date, hardly any reports exist that outline the reforms in medical studies in Switzerland from the first partial reforms in the 1970s until today. Methods: This article outlines the recent history of medical curricula, their reforms in the early 1970s and, based on these, the key reasons for the major curricular reforms of the 2000s from the perspective of the authors. Results: The various projects, initiatives and legislative elements at the national level include the introduction of new quality control instruments – federal examination and programme accreditation, the introduction of a national catalogue of learning objectives and its two follow-up editions, as well as the implementation of the Bologna reform in undergraduate medical curricula. Examples of the key new elements found in all medical training in Switzerland include: the interdisciplinary orientation of learning content in organ and functional system-oriented subject areas or modules, the enhanced valorisation of practical clinical training, as well as the introduction of problem-oriented formats and the integration of partly formative, partly summative exams according to the format of the objective structured practical examination (OSCE). Characteristics unique to the four medical faculties and their medical training programme are also highlighted. Discussion: The described projects, initiatives and legislative elements have led to a dynamic, continuous development of medical curricula in Switzerland. The close cooperation between the faculties and the Federal Office of Public Health (FOPH) has also resulted in a redefinition of the roles and responsibilities of universities and the Federal Government according to the new Law on Medical Professions. This guarantees the medical faculties a great deal of autonomy, without neglecting quality assurance., Einleitung: Bisher existieren kaum Berichte, die die Schweizer Reformen des Medizinstudiums von den ersten Teilreformen in den 1970er Jahren bis heute skizzieren. Methoden: In der vorliegenden Arbeit werden kursorisch die jüngere Geschichte der humanmedizinischen Curricula, deren erste Teilreformen in den frühen 1970er Jahren und darauf aufbauend die wesentlichen Ausgangspunkte für die grossen Curriculumsreformen der 2000er Jahre aus Sicht der Autoren beschrieben. Ergebnisse: Die vielfältigen Projekte, Initiativen und gesetzgebenden Elemente auf Eidgenössischer Ebene umfassen die Einführung von neuen Qualitätsentwicklungsinstrumenten – Eidgenössische Prüfung und Programmakkreditierung, die Einführung und Weiterentwicklung eines nationalen Lernzielkataloges über insgesamt drei Editionen sowie die Einführung der Bologna Reformen auch in den humanmedizinischen Studiengängen. Im Sinne der Entwicklung von ausdifferenzierten Modellstudiengängen können exemplarisch die wesentlichen neuen Elemente aller Studiengänge in der Schweiz charakterisiert werden: die interdisziplinäre Ausrichtung der Lerninhalte in organ- und funktionssystem-orientierten Themenblöcken oder Modulen, die Aufwertung der klinisch-praktischen Ausbildung sowie die Einführung von problem-orientierten Formaten und der Integration von teils formativen, teils summativen Prüfungen nach dem OSCE-Format. Aufgezeigt werden auch die besonderen standort-spezifischen Charakteristika von vier Medizinischen Fakultäten und deren humanmedizinischen Studiengängen. Diskussion: Die beschriebenen Projekte, Initiativen und gesetzgebenden Elemente haben in der Schweiz zu einer dynamischen, weiterhin anhaltenden Entwicklung der humanmedizinischen Curricula geführt. Die enge Zusammenarbeit zwischen den Fakultäten und dem Bundesamt für Gesundheit (BAG) hat zudem bewirkt, dass mit dem neuen Medizinalberufegesetz Rollen und Verantwortungen zwischen Universitäten und Bund neu definiert worden sind. Dies gewährleistet den Fakultäten eine grosse Autonomie ohne die Qualitätssicherung zu vernachlässigen., GMS Journal for Medical Education; 36(5):Doc64

Tanja Birrenbach,1Simone Kraehenmann,1Martin Perrig,1Christoph Berendonk,2Soeren Huwendiek2 1Department of General Internal Medicine, Inselspital, Bern University Hospital, University of Bern, Bern, Switzerland; 2Department of Assessment and Evaluation, Institute of Medical Education, Medical Faculty Bern, Bern, Switzerland Background: Little is known about the attitudes toward, use of, and perceived barriers to clinical guidelines in Switzerland, a country with no national guideline agency. Moreover, there is no available data on the objective assessment of guideline knowledge in Switzerland. Therefore, we conducted a study at a large university’s Department of General Internal Medicine in Switzerland to assess physicians’ attitudes toward, use of, perceived barriers to, and knowledge of clinical guidelines.Participants and methods: Ninety-six physicians (residents, n=78, and attendings, n=18) were invited to take part in a survey. Attitudes toward, self-reported use of, and barriers hindering adherence to the clinical guidelines were assessed using established scales and frameworks. Knowledge of the guidelines was objectively tested in a written assessment comprising of 14 multiple-choice and 3 short answer case-based questions.Results: Fifty-five participants completed the survey (residents, n=42, and attendings, n=13; overall response rate 57%). Of these, 50 took part in the knowledge assessment (residents, n=37, and attendings, n=13; overall response rate 52%). Attitudes toward guidelines were favorable. They were considered to be a convenient source of advice (94% agreement), good educational tools (89% agreement), and likely to improve patient quality of care (91% agreement). Self-reported use of guidelines was limited, with only one-third reporting using guidelines often or very often. The main barriers to guideline adherence were identified as lack of guideline awareness and familiarity, applicability of existing guidelines to multimorbid patients, unfavorable guideline factors, and lack of time as well as inertia toward changing previous practice. In the assessment of guideline knowledge, the scores were rather modest (mean ± standard deviation: 60.5%±12.7% correct answers). Conclusion: In general, this study found favorable physician attitudes toward clinical guidelines. However, several barriers hindering guideline implementation were identified. The importance of improving guideline implementation was supported by modest results in a guideline knowledge test. Keywords: clinical guidelines, attitudes, barriers, knowledge, survey, physicians&nbsp

Problemstellung/Ziele: Ziel dieser Arbeit ist es herauszufinden unter welchen Umständen Mini-CEX und DOPS den Lernprozess von AssistenzärztInnen unterstützen. Methoden: Um Erfolgsfaktoren und Stolpersteine in der Verwendung von Mini-CEX und DOPS zu untersuchen, führten wir[zum vollständigen Text gelangen Sie über die oben angegebene URL], Jahrestagung der Gesellschaft für Medizinische Ausbildung (GMA)

Problemstellung/Ziele: Studien haben gezeigt, dass Ärzte über die Art und Weise der Gesprächsführung positiven Einfluss auf das Gesundheitsverhalten nehmen können [ref:1]. Trotz der zentralen Bedeutung der Gesprächsführung [ref:2], werden Gesprächstechniken[zum vollständigen Text gelangen Sie über die oben angegebene URL], Jahrestagung der Gesellschaft für Medizinische Ausbildung (GMA)

Problemstellung/Ziele: Kprim Aufgaben sind ein in der Medizin verbreiteter Multiple-Choice Aufgabentyp. Da für jede Antwortoption im Kontext der jeweils gestellten Aufgabenstellung eine gesonderte Richtig/Falsch-Entscheidung getroffen werden muss, stellt sich die Frage nach dem optimalen[zum vollständigen Text gelangen Sie über die oben angegebene URL], Jahrestagung der Gesellschaft für Medizinische Ausbildung (GMA)

Kurzbeschreibung: Dieser Workshop gibt einen praxisnahen Einblick in die qualitative Forschung. Dabei wird auf Themen fokussiert, die für die ersten Schritte, wenn man ein qualitatives Forschungsprojekt bis hin zur Publikation angehen möchte, besonders wichtig sind. Lernziele: Am Ende [zum vollständigen Text gelangen Sie über die oben angegebene URL], 1. Winter School des GMA-Ausschusses für Methodik der Ausbildungsforschung

Kurzbeschreibung: Dieser Workshop gibt einen praxisnahen Einblick in die Durchführung von Fokusgruppen als qualitativer Daten-Erhebungsmethode. Dabei wird auf Themen fokussiert, die für die praktische Durchführung besonders wichtig sind. Lernziele: Am Ende dieses Workshops sollen [zum vollständigen Text gelangen Sie über die oben angegebene URL], 1. Winter School des GMA-Ausschusses für Methodik der Ausbildungsforschung