ارزيابي كيفي و كمي سوالات آزمون ارتقاء دستياري سال هاي 91 و 92 دانشگاه علوم پزشكي قزوين

(Quantitative and Qualitative Indicators Evaluation of Residency Exams in Qazvin University of Medical Sciences (2012-13

سابقه و هدف: طراحي دقيق سؤالات آزمون ارتقا مبتني با اصول استاندارد از اهميت بالايي برخوردار است. هدف از اين مطالعه ارزيابي كيفي و كمي سوالات آزمون ارتقاء دستياري سال هاي 91 و 92 دانشگاه علوم پزشكي قزوين و بررسي ارتباط بين سطوح تاكسونومي با شاخص هاي كمي سؤالات آزمون ارتقا دستياري است. روش‌ - كار: كليه سؤالات آزمون ارتقا دستياري در 7 رشته تخصصي پزشكي دانشگاه علوم پزشكي قزوين در سال‌هاي 91 و 92 مورد مطالعه قرار گرفت. تاكسونومي سؤالات در سه سطح دانش، درك و كاربرد تعيين گرديد. قدرت افتراق در چهار گروه خوب، متوسط، ضعيف و منفي بررسي شد. درجه دشواري در 5 سطح ساده، متوسط، دشوار، خيلي دشوار و فوق العاده دشوار تقسيم بندي گرديد. اطلاعات وارد نرم‌افزار SPSS v.19 شد.جهت بررسي ارتباط بين متغيرها از آزمون كاي زوجي و ANOVA استفاده شد. يافته ها: از مجموع 2100 سؤال، 38درصد تاكسونومي يادآوري، 1/24درصد در سطح درك و 9/37درصد در سطح كاربرد بود. قدرت افتراق 9/24 درصد سؤالات منفي، 1/34 درصد ضعيف، 5/22 درصد متوسط و 5/18درصد خوب بود. ازنظر درجه دشواري، 1/22درصد سؤالات ساده، 6/22درصد متوسط، 5/24درصد دشوار، 5/17درصد خيلي دشوار و 2/13درصد فوق‌العاده دشوار بود. ارتباط معناداري بين تاكسونومي و قدرت افتراق بدست آمد، سوالات با تاكسونومي يادآوري قدرت افتراق كمتر و در سوالات با تاكسونومي درك و كاربرد قدرت افتراق بالاتر بود(001/0>p). نتيجه گيري: افزايش سطح تاكسونومي سؤالات مي‌تواند باعث بهبود قدرت افتراق سؤالات آزمون گردد. با توجه به اين‌كه سؤالات طراحي‌شده با تاكسونومي دو و سه كمتر از حد استاندارد بود(سطح استاندارد در آزمون‌هاي,post graduate 80 درصد مي‌باشد) پيشنهاد مي‌گردد اساتيد در آزمون ارتقا، تعداد سوالات بيشتري با تاكسونومي بالاتر طرح نمايند.

Background and Objective: The exact design of the residency exams (standards-based) is very important. The purpose of this study was Quantitative and qualitative indicators evaluation of residency exams in Qazvin University of Medical Sciences and study of the relationships between taxonomic levels by quantitative indicators. Materials and Methods: All questions of residency exams from 7 Medical Specialties of Qazvin University of Medical Sciences in 2012 and 2013 were studied. Taxonomy of questions in three levels: remembered, understanding and judges were determined. Discriminating power was studied in four groups as good, fair, poor, and negative. Difficulty was classified into 5 levels of easy, medium, hard, very difficult and extremely difficult. SPSS v.19 software was used for the calculation of the T-test and ANOVA. Results: A total of 2100 questions, 38 percent of the questions reminded taxonomy, 24.1 percent of the level of understanding and 37.9 percent level were judges. 24.9 percent of questions had negative discriminating power, 34.1 percent had poor, 22.5 percent had average and 18.5 percent had good discriminating power. For the degree of difficulty, 22.1 percent simple questions, 22.6 percent average, 24.5 percent difficult, 17.5 percent very difficult and 13.2 percent was extremely difficult. A significant association was found between taxonomic questions and differentiation factor, taxonomy remembered had less differentiation index and questions, taxonomic understanding and application had differentiation index higher(p<0.0001). Conclusion: The results showed increased levels of taxonomic questions can enhance the discriminating power test questions. Since questions designed the taxonomy of two and three were lower than the standard (80%), teachers were recommended design more questions higher taxonomy in residency exams.