شناسايي كاركرد متفاوت سوال براساس نظريه سوال- پاسخ: كاربرد الگوي تك پارامتري با استفاده از نرمافزار بايلوگ-امجي

Identifying differential item function (DIF) based on item-response theory: Application of the one parameter model using the BILOG- MG software

چكيده هدف: مقاله حاضر به دنبال توصيف و تشريح روش تشخيص كاركرد متفاوت سوال در چارچوب نظريه سوال- پاسخ، با استفاده از الگوي يك پارامتري با تاكيد بر سوگيري داخلي در يك آزمون است. روش: ابتدا مباني نظري رويكرد معرفي شد، و به دنبال آن به منظور ارايه عملي روش، دادههاي خردهمقياس گرامر در بخش تخصصي دفترچه زبان انگليسي آزمون سراسري در سال 1384 با نرمافزار بايلوگ- امجي تحت الگوي يك پارامتري با دو روش مقايسه سطوح مقادير دشواري در دو گروه و آزمون نسبت درستنمايي تحليل شدند. يافتهها: نتايج نشان داد كه بين مقدار دشواري سوال 8 در دو گروه تفاوت معنادار است. اين موضوع با برازش بهتر الگوي داراي كاركرد متفاوت سوال در مقايسه با الگوي بدون كاركرد متفاوت سوال (با آلفاي 0/05 ) تاييد شد. در واقع احتمال پاسخ درست به سوال 8 براي گروه مردان در مقايسه با گروه زنان بيشتر بوده است. نتيجه- گيري: اهميت بررسي كاركرد متفاوت سوال در آزمونهاي مختلف روز به روز در حال افزايش است. روشهاي موجود در نظريه كلاسيك به خاطر وجود تغييرپذيري شاخصهاي آن براي شناسايي اين موضوع مفيد نيستند. در مقابل روشهايي موجو در بافت نظريه سوال-پاسخ براي انجام اين كار مفيدتر هستند.

Abstract Aim: The aim of the present paper was to describe and explain the method of differential item function (DIF) within the framework of the item response theory (IRT) using the one parameter model with an emphasis on internal answer bias to the test. Method: As a first step, the theoretical foundations of the perspective was introduced and then in order to offer a practical application of the method, items of the English grammar subscale of the foreign language booklet in the National University Entrance Exam (NUEM) in the academic year 2005-06 was analyzed by two methods of comparing levels of difficulty values in two groups and likelihood ratio test. This was done by using BILOG- MG software under the one parameter model. Results: Findings showed there was a significant difference in the amount of difficulty coefficient between the two groups on question number 8. This was confirmed by the fact that there was a better fitness when using the model including DIF compared with the model without DIF (p<0.05). In fact the probability of a correct response was higher for males than for females. Conclusion: The importance of investigating DIF in different tests is becoming increasingly important The methods for investigating DIF in classical test theory are not useful due to the variability in the indices obtained by this method. In contrast, techniques under the IRT context seem more plausible. Keywords: BILOG-MG software, differential item functions, item response theory, one parameter