摘要:مقدمه: آزمون ارتقاء، يکی از مهمترين آزمونهای تراکمی است که در مقطع دستياری انجام میشود و منجر به صدور مجوز ورود دستياران به سال بالاتر میگردد، آزمونهای چندگزينهای از عينیترين و رايجترين انواع آزمون در آموزش علوم پزشکی هستند، بنابر اين يافتن راهکارهايی برای بهبود کيفيت آزمونها به خصوص در مقاطع تخصصی اهميت دارد. هدف اين مطالعه بررسی تأثير کارگاه آموزشی طراحی سؤالات چندگزينهای بر بهبود کيفيت طراحی سؤالات آزمون ارتقای دستياری دانشکده پزشکی دانشگاه علوم پزشکی گيلان است. روشها: در اين مطالعه نيمه تجربی (قبل و بعد)، کليه سؤالات آزمونهای ارتقای دستياری دانشکده پزشکی دانشگاه علوم پزشکی گيلان، مربوط به 12 رشته تخصصصی در سال 89 از نظر ساختار طراحی و سطح تاکسونومی با استفاده از چک ليستی روا و پايا مبتنی بر اصول ميلمن بررسی شد (150 سؤال از هر رشته و در مجموع1800 سؤال). بعد از برگزاری 12 دوره کارگاه آموزشی يک روزه طراحی سؤالات چندگزينهای (MCQ) جهت طراحان آزمون (به تفکيک گروههای آموزشی) در طی يک سال، سؤالات آزمون ارتقای سال 90 نيز مورد بررسی قرار گرفت. دادههای قبل و بعد از مداخله مربوط به کليه سؤالاتی که توسط افراد شرکتکننده در کارگاه مداخلهای طراحی شده بود با استفاده از آزمون آماری Wilcoxon signed-rank test مقايسه گرديد. نتايج: در آزمون کتبی سال 1389، 1204سؤال (09/66 درصد) تاکسونومی يک، 565 سؤال (4/31 درصد) تاکسونومی دو، و 31 سؤال(7/1درصد) تاکسونومی سه داشتند. در سال 1390، 867 سؤال (2/48%) در تاکسونومی يک، 741 سؤال(2/41%) تاکسونومی دو، و 192 سؤال(6/10%) تاکسونومی سه طراحی شده بودند. تفاوت معناداری بين تاکسونومی سؤالات رشتههای مختلف در سالهای 89 و 90 مشاهده شد (83/23, z=0001/0p<). در زمينه رعايت اصول ساختاری ميلمن در سؤالات چندگزينهای، يافتهها نشان داد که نسبت سؤالات بدون اشکال در آزمون سال 1389، برابر 77/66% و در سال 1390، 22/75% بود. از نظر مراعات اصول ميلمن بين کيفيت سوالات آزمون سالهای 89 و 90 تفاوت معنادار آماری وجود دارد (703/16z=، 0001/0p<). نتيجهگيری: مطالعه حاضر پيشرفت معناداری را در کاربرد سؤالات مربوط به سطوح عميق دانش (تاکسونومی 2 و 3) در آزمون ارتقای دستياری نشان داد که بيانگر تأثير مثبت مداخله آموزشی انجام شده (کارگاه آموزشی MCQ) بود.
其他摘要:Introduction: Resident promotion exams are considered one of the most important summative exams in residency period that allow residents to proceed to a higher grade. Multiple choice questions are the most common and objective test in medical science education. Therefore, finding methods to improve quality of exams, particularly in specialty programs, is important. The aim of this study is to determine effectiveness of training workshops on improving quality of residency promotion exams in medical school of Guilan University of Medical Sciences (GUMS). Methods: In this Quasi-experimental study (before & after), all questions of resident promotion exams of GUMS for 12 specialty programs in year 2010 (150 questions for each specialty-1800 questions in total) were structurally and taxonomically evaluated using a valid and reliable checklist based on Millman principles. After12 one–day educational workshops (one for each department) on multiple choice questions), questions of residents’ promotion exam in year 2011 were evaluated. Data related to questions designed by faculties who had participated in the interventional workshop were analyzed using statistical Wilcoxon signed-rank test. Results: Taxonomy of questions of written promotion exam in years 2010 and 2011 were as follows: 1204(%66.09) questions were of first level taxonomy, 565 (%31.4) of 2nd level, and 31(% 1.7) of 3rd level in the 2010 exam, and 867 questions (%48.2) were of first level taxonomy, 741 (%41.2) of 2nd level, and 192 (%10.6) of 3rd level in the 2011. Findings showed significant differences between taxonomy of questions of different programs in 2010 and 2011 (p=0.0001, Z=23.83). Also, according to Millman’s structural principles, the rate of questions with no structural problem was %66.77 in the year 2010 and %75.22 in 2011. There is a statistically significant difference based on Millman principles between 2010 and 2011 (p=0.0001, Z=16.703). Conclusion: Current study showed that training workshops are effective in improving the rate of questions targeted at higher levels of knowledge (Taxonomies 2 & 3) in residency promotion exams.
关键词:آزمونهاي چندگزينهاي; آزمون ارتقاي دستياري; تاكسونومي; آموزش استاد; کارگاههای آموزشی