摘要:مقدمه: آزمون ارتقاء، یکی از مهمترین آزمونهای تراکمی است که در مقطع دستیاری انجام میشود و منجر به صدور مجوز ورود دستیاران به سال بالاتر میگردد، آزمونهای چندگزینهای از عینیترین و رایجترین انواع آزمون در آموزش علوم پزشکی هستند، بنابر این یافتن راهکارهایی برای بهبود کیفیت آزمونها به خصوص در مقاطع تخصصی اهمیت دارد. هدف این مطالعه بررسی تأثیر کارگاه آموزشی طراحی سؤالات چندگزینهای بر بهبود کیفیت طراحی سؤالات آزمون ارتقای دستیاری دانشکده پزشکی دانشگاه علوم پزشکی گیلان است. روشها: در این مطالعه نیمه تجربی (قبل و بعد)، کلیه سؤالات آزمونهای ارتقای دستیاری دانشکده پزشکی دانشگاه علوم پزشکی گیلان، مربوط به 12 رشته تخصصصی در سال 89 از نظر ساختار طراحی و سطح تاکسونومی با استفاده از چک لیستی روا و پایا مبتنی بر اصول میلمن بررسی شد (150 سؤال از هر رشته و در مجموع1800 سؤال). بعد از برگزاری 12 دوره کارگاه آموزشی یک روزه طراحی سؤالات چندگزینهای (MCQ) جهت طراحان آزمون (به تفکیک گروههای آموزشی) در طی یک سال، سؤالات آزمون ارتقای سال 90 نیز مورد بررسی قرار گرفت. دادههای قبل و بعد از مداخله مربوط به کلیه سؤالاتی که توسط افراد شرکتکننده در کارگاه مداخلهای طراحی شده بود با استفاده از آزمون آماری Wilcoxon signed-rank test مقایسه گردید. نتایج: در آزمون کتبی سال 1389، 1204سؤال (09/66 درصد) تاکسونومی یک، 565 سؤال (4/31 درصد) تاکسونومی دو، و 31 سؤال(7/1درصد) تاکسونومی سه داشتند. در سال 1390، 867 سؤال (2/48%) در تاکسونومی یک، 741 سؤال(2/41%) تاکسونومی دو، و 192 سؤال(6/10%) تاکسونومی سه طراحی شده بودند. تفاوت معناداری بین تاکسونومی سؤالات رشتههای مختلف در سالهای 89 و 90 مشاهده شد (83/23, z=0001/0p<). در زمینه رعایت اصول ساختاری میلمن در سؤالات چندگزینهای، یافتهها نشان داد که نسبت سؤالات بدون اشکال در آزمون سال 1389، برابر 77/66% و در سال 1390، 22/75% بود. از نظر مراعات اصول میلمن بین کیفیت سوالات آزمون سالهای 89 و 90 تفاوت معنادار آماری وجود دارد (703/16z=، 0001/0p<). نتیجهگیری: مطالعه حاضر پیشرفت معناداری را در کاربرد سؤالات مربوط به سطوح عمیق دانش (تاکسونومی 2 و 3) در آزمون ارتقای دستیاری نشان داد که بیانگر تأثیر مثبت مداخله آموزشی انجام شده (کارگاه آموزشی MCQ) بود.
其他摘要:Introduction: Resident promotion exams are considered one of the most important summative exams in residency period that allow residents to proceed to a higher grade. Multiple choice questions are the most common and objective test in medical science education. Therefore, finding methods to improve quality of exams, particularly in specialty programs, is important. The aim of this study is to determine effectiveness of training workshops on improving quality of residency promotion exams in medical school of Guilan University of Medical Sciences (GUMS). Methods: In this Quasi-experimental study (before & after), all questions of resident promotion exams of GUMS for 12 specialty programs in year 2010 (150 questions for each specialty-1800 questions in total) were structurally and taxonomically evaluated using a valid and reliable checklist based on Millman principles. After12 one–day educational workshops (one for each department) on multiple choice questions), questions of residents’ promotion exam in year 2011 were evaluated. Data related to questions designed by faculties who had participated in the interventional workshop were analyzed using statistical Wilcoxon signed-rank test. Results: Taxonomy of questions of written promotion exam in years 2010 and 2011 were as follows: 1204(%66.09) questions were of first level taxonomy, 565 (%31.4) of 2nd level, and 31(% 1.7) of 3rd level in the 2010 exam, and 867 questions (%48.2) were of first level taxonomy, 741 (%41.2) of 2nd level, and 192 (%10.6) of 3rd level in the 2011. Findings showed significant differences between taxonomy of questions of different programs in 2010 and 2011 (p=0.0001, Z=23.83). Also, according to Millman’s structural principles, the rate of questions with no structural problem was %66.77 in the year 2010 and %75.22 in 2011. There is a statistically significant difference based on Millman principles between 2010 and 2011 (p=0.0001, Z=16.703). Conclusion: Current study showed that training workshops are effective in improving the rate of questions targeted at higher levels of knowledge (Taxonomies 2 & 3) in residency promotion exams.
关键词:آزمونهای چندگزینهای; آزمون ارتقای دستیاری; تاکسونومی; آموزش استاد; کارگاههای آموزشی