Competency domains in an undergraduate Objective Structured Clinical Examination: their impact on compensatory standard setting

2008 ◽  
Vol 42 (6) ◽  
pp. 600-606 ◽  
Author(s):  
Ashley Reece ◽  
Eddie M K Chung ◽  
R Mark Gardiner ◽  
Sian E Williams
2017 ◽  
Vol 39 (12) ◽  
pp. 1261-1267 ◽  
Author(s):  
Bunmi Sherifat Malau-Aduli ◽  
Peta-Ann Teague ◽  
Karen D’Souza ◽  
Clare Heal ◽  
Richard Turner ◽  
...  

2017 ◽  
Vol 5 (1) ◽  
pp. 8
Author(s):  
Abdullah Alnemari ◽  
Fadi Munshi ◽  
Hatim Al-Jifree ◽  
Abdulaziz Alshehri

Author(s):  
Song Yi Park ◽  
Sang-Hwa Lee ◽  
Min-Jeong Kim ◽  
Ki-Hwan Ji ◽  
Ji Ho Ryu

Purpose: Setting standards is critical in health professions. However, appropriate standard setting methods do not always apply to the set cut score in performance assessment. The aim of this study was to compare the cut score when the standard setting is changed from the norm-referenced method to the borderline group method (BGM) and borderline regression method (BRM) in an objective structured clinical examination (OSCE) in medical school.Methods: This was an explorative study to model of the BGM and BRM. A total of 107 fourth-year medical students attended the OSCE at seven stations with encountering standardized patients (SPs) and one station with performing skills on a manikin on 15 July 2021. Thirty-two physician examiners evaluated the performance by completing a checklist and global rating scales.Results: The cut score of the norm-referenced method was lower than that of the BGM (p<0.01) and BRM (p<0.02). There was no significant difference in the cut score between the BGM and BRM (p=0.40). The station with the highest standard deviation and the highest proportion of the borderline group showed the largest cut score difference in standard setting methods.Conclusion: Prefixed cut scores by the norm-referenced method without considering station contents or examinee performance can vary due to station difficulty and content, affecting the appropriateness of standard setting decisions. If there is an adequate consensus on the criteria for the borderline group, standard setting with the BRM could be applied as a practical and defensible method to determine the cut score for OSCE.


Pflege ◽  
2016 ◽  
Vol 29 (4) ◽  
pp. 193-203 ◽  
Author(s):  
Angelika Beyer ◽  
Adina Dreier ◽  
Stefanie Kirschner ◽  
Wolfgang Hoffmann

Zusammenfassung. Hintergrund: Aufgrund der demografischen und epidemiologischen Entwicklung wird die Vermittlung adäquater pflegerischer Kompetenzen in der pflegerischen Ausbildung zunehmend diskutiert. Kompetenzen sind in den Examina angemessen zu überprüfen. Hierfür haben sich international OSCEs bewährt. Ziel: Ziel der vorliegenden Analyse war die Ermittlung von Kompetenzen, die in pflegerischen Erstausbildungen mit OSCEs überprüft werden. Methodik: In internationalen Datenbanken wurden einschlägige Publikationen recherchiert. Analyse-Einschlusskriterium war die Nennung mindestens einer überprüften Kompetenz. Die Kompetenzen wurden – in Anlehnung an den «Fachqualifikationsrahmen Pflege für die hochschulische Bildung» – nach Wissen, Fertigkeiten und Haltung kategorisiert. Ergebnisse: 36 Artikel erfüllten das Einschlusskriterium. Relevante Studien stammen mehrheitlich aus Großbritannien (UK), Kanada und Australien. Es wurden insgesamt n = 166 Kompetenzen in allen Kategorien identifiziert, die anhand verschiedener Methoden gemessen wurden. Am häufigsten wurden Fertigkeiten überprüft. Dabei wurde der sichere Umgang mit Medikamenten am häufigsten thematisiert. Weitere wichtige Themen waren die Kommunikationskompetenz in Bezug auf PatientInnen und die Fähigkeit zur Selbsteinschätzung. Diskussion: Es werden sehr unterschiedliche Kompetenzen mit differenten Formaten per OSCE gemessen. OSCE ermöglichen eine Überprüfung sowohl auf individueller als auch institutioneller Ebene, also sowohl für die Lehre als auch das Gelernte. Weiterer Forschungsbedarf wird festgestellt.


Sign in / Sign up

Export Citation Format

Share Document