بررسي تفاوت عملكرد آيتم ها در آزمون ورودي دانشگاه با استفاده از آناليز مدل رش

Differential Item Functioning of University Entrance Exam: Using Rasch Analysis

مطالعه حاضر با هدف بررسي وجود تغييرناپذيري سوال ها (DIF) با لحاظ كردن جنسيت شركت كننده هاي آزمون ورودي دانشگاه در ايران (كنكور) در رشته ي زبان هاي خارجي (NUEEFL) مي باشد. شركت كنندگان ( تعداد = 5000) در اين مطالعه به صورت تصادفي از ميان داوطلبان كنكور از ميان رشته هاي ادبيات انگليسي، آموزش، و مترجمي انتخاب شده است. مطالعه حاضر به بررسي عملكرد داوطلبان مرد و زن در برابر تبعيض و تغيير ناپذير بودن سوال ها نسبت به گروه هاي مورد مقايسه با استفاده از رويكرد مدل رش پرداخته است. نتايج نشان داد سوالهاي كنكور در ميان شركت كننده هاي زن و مرد تغيير پذير بودند. همچنين آزمون تك بعدي بودن نشان داد كه براي پاسخ صحيح دادن به سوالات نياز به دانش، توانايي و مهارت هايي غير از دانش زباني مي باشد، بنابراين سوالات آزمون تك بعدي نمي باشد. مي توان نتيجه گرفت كه نمرات آزمون كنكور داراي واريانس سازه-هاي بي ربط مي باشد و عادلانه بودن كلي آزمون مورد تاييد قرار نگرفت.

The present study aims at investigating the presence of Differential Item Functioning (DIF) in terms of gender in a high stakes language proficiency test, the National University Entrance Exam for Foreign Languages (NUEEFL). The participants (N = 5000) of this study have been selected randomly from a pool of examinees who had taken the NUEEFL as a university entrance requirement for English language studies (English literature, Teaching, and Translation). The results revealed that among 95 items, 40 items exhibit DIF between male and female. Our investigation revealed that the test is not unidimensional and a correct answer requires other knowledge, ability, and skill than the ones that the items aim to measure. It is concluded that the NUEEFL test’s scores are not free of construct-irrelevant variance and the overall fairness of the test is under question. In addition, the current research provides several important implications for test designers, stake-holders, administrators, as well as teachers and students.