fa روایی سازه و روایی پیش‌بینی‌کننده ارزیابی‌های حین دوره دستیاران طب اورژانس دانشگاه علوم پزشکی تهران ارزشيابي برنامه Program Evaluation پژوهشی اصیل Original research article <div style="border:solid #0070C0 3.0pt;padding:1.0pt 4.0pt 1.0pt 4.0pt;background:#DBE5F1;"><strong><span style="font-family:b mitra;"><span style="font-size:13.0pt;">مقدمه: </span></span></strong><span style="font-family:b mitra;"><span style="font-size:13.0pt;">بررسی شاخص‌های روان سنجی با هدف ارزیابی کیفیت آزمون‌های پیشرفت تحصیلی از اهمیت ویژه‌ای برخوردار است. هدف این مطالعه بررسی نتایج حاصل از ارزیابی‌های درون بخشی و کتبی دستیاران طب اورژانس از نظر روایی سازه و نیز توانایی آنها در پیش‌بینی میزان موفقیت آکادمیک دستیاران است. </span></span><br> <strong><span style="font-family:b mitra;"><span style="font-size:13.0pt;">روش‌ها: </span></span></strong><span style="font-family:b mitra;"><span style="font-size:13.0pt;">در این مطالعه توصیفی</span></span> <span style="font-family:b mitra;"><span style="font-size:13.0pt;">همبستگی تمامی دستیاران طب اورژانس دانشگاه علوم پزشکی تهران که بین سال‌های 1388 تا 1393موفق به ورود به دوره دستیاری طب اورژانس شده ‌بودند و تا سال 1396 در آزمون پره بورد شرکت کرده بودند به روش سرشماری وارد مطالعه شدند(199 نفر). نمره آزمون گواهی‌نامه به عنوان متغیر اصلی تعیین گردید؛ سپس همبستگی نتایج ارزیابی‌های درون بخشی و کتبی با آن مقایسه شد. برای تعیین همبستگی بین نمرات از آزمون همبستگی پیرسون استفاده شد. </span></span><br> <strong><span style="letter-spacing:-.2pt;"><span style="font-family:b mitra;"><span style="font-size:13.0pt;">نتایج: </span></span></span></strong><span style="font-family:b mitra;"><span style="font-size:13.0pt;">در نهایت نتایج ارزیابی&shy;های 125 دستیار تحلیل شد. میزان همبستگی بین نمرات درون بخشی یک و دو، کتبی یک و دو با نمرات آزمون گواهی‌نامه به ترتیب (006/0</span></span><span dir="LTR"><span style="font-size:13.0pt;">, P=</span></span><span style="font-family:b mitra;"><span style="font-size:13.0pt;"> 3/0</span></span><span dir="LTR"><span style="font-size:13.0pt;">r=</span></span><span style="font-family:b mitra;"><span style="font-size:13.0pt;">) ، (014/0</span></span><span dir="LTR"><span style="font-size:13.0pt;">, P=</span></span><span style="font-family:b mitra;"><span style="font-size:13.0pt;"> 2/0</span></span><span dir="LTR"><span style="font-size:13.0pt;">r=</span></span><span style="font-family:b mitra;"><span style="font-size:13.0pt;">) ،(202/0</span></span><span dir="LTR"><span style="font-size:13.0pt;">, P=</span></span><span style="font-family:b mitra;"><span style="font-size:13.0pt;"> 1/0</span></span><span dir="LTR"><span style="font-size:13.0pt;">r=</span></span><span style="font-family:b mitra;"><span style="font-size:13.0pt;">) ،(0001/0</span></span><span dir="LTR"><span style="font-size:13.0pt;">, P=</span></span><span style="font-family:b mitra;"><span style="font-size:13.0pt;"> 3/0</span></span><span dir="LTR"><span style="font-size:13.0pt;">r=</span></span><span style="font-family:b mitra;"><span style="font-size:13.0pt;">) بود. میانگین نمرات دستیاران سال اول، دوم و سوم در آزمون کتبی از 150 نمره در سال 1393 به ترتیب12/57&plusmn;29/77، 05/8&plusmn;33/91، 52/8&plusmn;13/123، میانگین این نمرات در سال 1394، 52/8&plusmn;44/67، 41/23&plusmn;17/73، 38/6&plusmn;25/121 و در سال ،1395 04/28&plusmn;17/68، 34/14&plusmn;42/88 و 73/7&plusmn;51/118 بود.</span></span><span style="letter-spacing:-.2pt;"><span style="font-family:b yagut;"></span></span><br> <strong><span style="font-family:b mitra;"><span style="font-size:13.0pt;">نتیجه‌گیری: </span></span></strong><span style="font-family:b mitra;"><span style="font-size:13.0pt;">نتایج حاصل از مطالعه نشان داد ارزیابی‌های حین دوره دستیاران طب اورژانس در پیش‌بینی میزان موفقیت آکادمیک دستیاران از روایی پیش‌بینی‌کننده مناسبی برخوردار است. همچنین مشاهده قدرت افتراق آزمون‌های کتبی در تمایز بین دستیاران سطوح مختلف، نشان‌دهنده روایی سازه این آزمون است. </span></span><span style="font-family:b mitra;"><span style="font-size:9.0pt;"></span></span></div> <strong>&nbsp;</strong> <strong>Introduction</strong>: <em>The evaluation of psychometric indicators in order to evaluate the quality of academic achievement exams is of particular importance.</em> <em>The aim of this study was to investigate the results of the written exams and internal evaluations among the emergency medicine residents in terms of the construct validity and also their ability in predicting resident&rsquo;s academic success.</em><br> <strong>Methods</strong>: <em>In this descriptive correlational study all the emergency medicine residents of Tehran University of Medical Sciences who could enter the emergency medicine residency program within 2009 to 2014 and had participated in the pre-board exam till 2017, were selected through the census method (n=199). The certification exam score was considered as the main variable; then, correlation of written and internal evaluations results were compared with it. The Pearson correlation test was used to determine the correlation between the scores. </em><br> <strong>Results:</strong> <em>Finally, the evaluation results of 125 residents were analyzed. The correlation between first and second internal evaluation scores, first and second written scores with the certification exam scores were (p=0.006, r=0.3), (p=0.014, r=0.2), (p=0.202, r=0.1) and (p=0.000, r=0.3), respectively. The mean scores of the first, second and third year residents in written exams were 77.92&plusmn;12.57, 91.33&plusmn;8.05, 123.13&plusmn;8.52 out of 150 in 2014; the mean of these scores were 67.44&plusmn;8.52, 73.17&plusmn;23.41, 121.52&plusmn;6.38 in 2015 and 68.71&plusmn;28.04, 88.24&plusmn;14.34 and 118.15&plusmn;7.73 in 2016, respectively</em><br> <strong>Conclusion</strong>: <em>The results of this study showed that in-training evaluations of the emergency medicine residents had acceptable predictive validity in predicting academic success of residents. Also, the ability of the written exams in discriminating between residents of different grades demonstrated the construct validity of these exams. </em><br> &nbsp; روایی سازه, موفقیت آکادمیک, دستیار, طب اورژانس Construct validity, academic success, resident, emergency medicine 394 402 http://ijme.mui.ac.ir/browse.php?a_code=A-10-4009-2&slc_lang=fa&sid=1 Sajad Omidi سجاد امیدی omidi.sajjadi@gmail.com 0079360699 7000319475328460073565 No Tehran University of Medical Sciences دانشگاه علوم پزشکی تهران Hadi Mirfazaelian هادی میرفضایلیان h-mirfazaelian@sina.tums.ac.ir 0068451236 7000319475328460073566 No Tehran University of Medical Sciences دانشگاه علوم پزشکی تهران Jayran Zebarsast جیران زبردست jayran.zebardast@gmail.com 0079524583 7000319475328460073567 No Institute of Cognitive Sciences, Tehran پژوهشکده علوم شناختی، تهران Atousa Akhgar آتوسا اخگر aakhgar@sina.tums.ac.ir 0079360696 7000319475328460073568 Yes Tehran University of Medical Sciences دانشگاه علوم پزشکی تهران Mohammad Jalili محمد جلیلی mjalili@tums.ac.ir 0839506521 7000319475328460073569 No Tehran University of Medical Sciences دانشگاه علوم پزشکی تهران