fa تحلیل کیفیت آزمون عینی ساختارمند بالینی در دانشگاه علوم پزشکی تهران ارزشيابي مهارتهاي باليني Clinical Skills Evaluation پژوهشی اصیل Original research article <div style="border:solid #0070C0 3.0pt;padding:1.0pt 4.0pt 1.0pt 4.0pt;background:#DBE5F1;"> <p dir="RTL" style="margin-bottom:0.0001pt;text-align:justify;line-height:normal;background-image:initial;background-position:initial;background-size:initial;background-repeat:initial;background-attachment:initial;background-origin:initial;background-clip:initial;border:none;padding:0in;"><strong><span style="font-family:b mitra;"><span style="font-size:13.0pt;">مقدمه: </span></span></strong><span style="font-family:b mitra;"><span style="font-size:13.0pt;">با رواج آزمون‌های مبتنی بر عملکرد، استفاده از شاخص‌های مناسب برای اطمینان از کیفیت آنها ضروری است. این مطالعه به بررسی متریک‌های‌ آزمون عینی ساختارمند بالینی </span></span><span style="font-family:b mitra;">(</span><span dir="LTR">Objective Structured Clinical Examination</span><span style="font-family:b mitra;">) </span><span style="font-family:b mitra;"><span style="font-size:13.0pt;">می‌پردازد.</span></span></p> <p dir="RTL" style="margin-bottom:0.0001pt;text-align:justify;line-height:normal;background-image:initial;background-position:initial;background-size:initial;background-repeat:initial;background-attachment:initial;background-origin:initial;background-clip:initial;border:none;padding:0in;"><strong><span style="font-family:b mitra;"><span style="font-size:13.0pt;">روش‌ها: </span></span></strong><span style="font-family:b mitra;"><span style="font-size:13.0pt;">در این مطالعه توصیفی مقطعی درده ایستگاه آزمون </span></span><span dir="LTR">OSCE</span> <span style="font-family:b mitra;"><span style="font-size:13.0pt;">پیش‌کارورزی سال 91 دانشگاه علوم پزشکی، نمره حدنصاب به روش رگرسیون مرزی تعیین شد و میزان ردی محاسبه گردید. ریشه میانگین مربعات خطا </span></span><span style="font-family:b mitra;">(</span><span dir="LTR">Root Mean Square Error</span><span style="font-family:b mitra;">) </span><span style="font-family:b mitra;"><span style="font-size:13.0pt;">برای تخمین میزان خطای حدنصاب به کار رفت. ثبات درونی آزمون با آلفای کرونباخ محاسبه و سپس مقدار خطای استاندارد اندازه‌گیری </span></span><span style="font-family:b mitra;">(</span><span dir="LTR">Standard Error of Measurement</span><span style="font-family:b mitra;">) </span><span style="font-family:b mitra;"><span style="font-size:13.0pt;">تعیین شد. برای هر ایستگاه شاخص‌های آلفا در صورت حذف، </span></span><span dir="LTR"><span style="font-size:13.0pt;">R2</span></span><span style="font-family:b mitra;"><span style="font-size:13.0pt;">، تمایز بین درجات، دشواری و تمیز به دست آمد.</span></span></p> <p dir="RTL" style="margin-bottom:0.0001pt;text-align:justify;line-height:normal;background-image:initial;background-position:initial;background-size:initial;background-repeat:initial;background-attachment:initial;background-origin:initial;background-clip:initial;border:none;padding:0in;"><strong><span style="font-family:b mitra;"><span style="font-size:13.0pt;">نتایج: </span></span></strong><span style="font-family:b mitra;"><span style="font-size:13.0pt;">در این آزمون266 نفر از دانشجویان شرکت نمودند.نمره حدنصاب کل 55/52 از 100 به دست آمد. 4 نفر (5/1 درصد) در آزمون رد شدند و </span></span><span dir="LTR">RMSE</span> <span style="font-family:b mitra;"><span style="font-size:13.0pt;">معادل 45/0 بود. نمره</span></span> &nbsp;<span dir="LTR">SEM</span><span style="font-family:b mitra;"><span style="font-size:13.0pt;"> 84/4و آلفای کرونباخ آزمون 70/0 محاسبه شدند که در صورت حذف هر یک از ایستگاه‌ها بین 64/0 تا 70/0 متغیر بود. مقدار </span></span><span dir="LTR">R²</span><span style="font-family:b mitra;"><span style="font-size:13.0pt;"> از 16/0 تا 85/0 به دست آمد. شاخص تمایز بین درجات از 66/0 تا 93/1 بود. دامنه سختی و تمیز به ترتیب 89/0-71/0 و 44/0-12/0 بود.</span></span></p> <p dir="RTL" style="margin-bottom:0.0001pt;text-align:justify;line-height:normal;background-image:initial;background-position:initial;background-size:initial;background-repeat:initial;background-attachment:initial;background-origin:initial;background-clip:initial;border:none;padding:0in;"><strong><span style="font-family:b mitra;"><span style="font-size:13.0pt;">نتیجه‌گیری: </span></span></strong><span style="font-family:b mitra;"><span style="font-size:13.0pt;">ثبات درونی، خطای آزمون و خطای حدنصاب در حد قابل قبول بود. تمام ایستگاه‌ها از لحاظ آلفا در صورت حذف آیتم مطلوب بودند. </span></span><span dir="LTR">R²</span><span style="font-family:b mitra;"><span style="font-size:13.0pt;"> در دو ایستگاه از حد مطلوب پایین‌تر بود. تمایز بین درجات به غیر از یک ایستگاه خوب بود. ایستگاه‌ها نه چندان دشوار با قابلیت تمیز نه چندان بالا بودند که در آزمون معیاری مطلوب محسوب می‌شود.</span></span></p> </div> <p style="margin-bottom:0in;margin-bottom:.0001pt;text-align:justify;text-justify:inter-ideograph;line-height:normal;direction:ltr;unicode-bidi:embed;"><strong><span style="font-size:11.0pt;">Introduction</span></strong>: <em><span style="font-size:11.0pt;">With the&nbsp; increasing popularity of performance-based assessments, it is necessary to employ proper indicators to ensure their quality. The present study examines the metrics of Objective Structured Clinical Examination (OSCE).</span></em></p> <p style="margin-bottom:0in;margin-bottom:.0001pt;text-align:justify;text-justify:inter-ideograph;line-height:normal;direction:ltr;unicode-bidi:embed;"><strong><span style="font-size:11.0pt;">Methods</span></strong>: <em><span style="font-size:11.0pt;">In this descriptive, cross-sectional research in 10 pre-internship OSCE stations of Tehran University of Medical Sciences in 2012, the cut-off score was determined by borderline regression method and the failure rate was calculated. Root Mean Square Error (RMSE) was used to estimate error rate threshold.&nbsp; Internal consistency was calculated using Cronbach&rsquo;s alpha and then, the Standard Error of Measurement (SEM) was determined. Alpha if item deleted, R2 coefficient, intergrade discrimination, difficulty and discrimination indices were calculated for each station. A total of 266 students participated in this exam.</span></em></p> <p style="margin-bottom:0in;margin-bottom:.0001pt;text-align:justify;text-justify:inter-ideograph;line-height:normal;direction:ltr;unicode-bidi:embed;"><strong><span style="font-size:11.0pt;">Results:</span></strong><em><span style="font-size:11.0pt;"> A total of 266 students participated in this exam.</span></em><span style="font-size:11.0pt;"> <em>The OSCE total cut-off score was 52.55 (out of 100). Four students (1.5%) failed the exam and the RMSE equaled 0.45. SEM was 4.84 and Cronbach&rsquo;s alpha was calculated at 0.70 where the alpha if item deleted scores varied from 0.64 to 0.70. The R2 coefficient ranged from 0.16 to 0.85 and the intergrade discrimination ranged between 0.66 and 1.93. The ranges of difficulty and discrimination indices were 0.71-0.89 and 0.12-0.44 respectively.</em></span></p> <p style="margin-bottom:0in;margin-bottom:.0001pt;text-align:justify;text-justify:inter-ideograph;line-height:normal;direction:ltr;unicode-bidi:embed;"><strong><span style="font-size:11.0pt;">Conclusion</span></strong><span style="font-size:11.0pt;">:</span><span style="font-size:11.0pt;"> <em>The internal consistency, SEM and threshold error rate were all acceptable. The alpha if item deleted was in the acceptable range in all stations. In two stations, the R2 value was lower than the desired range. The intergrade discrimination value was appropriate in all stations except one. The stations were not too difficult or highly discriminative which is considered favorable in criterion-referenced exams.</em></span></p> تحلیل آزمون, سایکومتریک, آزمون عینی ساختارمند بالینی Test analysis, psychometrics, Objective Structured Clinical Examination 50 59 http://ijme.mui.ac.ir/browse.php?a_code=A-10-396-8&slc_lang=fa&sid=1 Sara Mortaz Hejri سارا مرتاض هجری saramhejri@yahoo.com 7000319475328460065714 7000319475328460065714 No Tehran University of Medical Sciences دانشگاه علوم پزشکی تهران Mohammad Jalili محمد جلیلی mjalili@tums.ac.ir 7000319475328460065715 7000319475328460065715 Yes Tehran University of Medical Sciences دانشگاه علوم پزشکی تهران