مقايسه روش هاي تخصيص وزن هاي بهينه به مولفه هاي آزمون هاي مركب

Comparing the Methods of Assigning Optimum Weights to the Components of Composite Tests

يك مسيله مهم در تعيين نمره يك آزمون مركب، نحوه تركيب نمره بخش هاي مختلف آزمون يا اصطلاحاً خرده آزمون ها به منظور محاسبه نمره كل داوطلبان است. اين وزن ها بايد به گونه اي انتخاب شوند كه ضمن در نظر گرفتن ويژگي-هاي روان‌سنجي هر خرده آزمون و مولفه هاي تعيين‌كننده آنها، اختلاف نمره مشاهده شده هر داوطلب با نمره واقعي كه بيانگر توانايي واقعي داوطلب است را حداقل نمايد. به عبارت ديگر چارچوب تصميم‌گيري بر مبناي ملاحظات مختلف نظير روايي محتوا (اعتبار)، دفعات آزمون، پايايي و ... طراحي مي‌شود.براي به دست آوردن حداكثر پايايي در نمره مركب روش هاي مختلفي در چند دهه اخير پيشنهاد شده است. اين روش ها به دو دسته كلي، روش هاي ضمني و عيني تقسيم مي شوند. روش هاي ضمني شامل جمع كردن نمرات خام و مدل بندي سيوال- پاسخ و روش هاي عيني شامل وزني كردن مولفه ها به وسيله ميزان دشواري سيوالات، تخصيص وزن ها به نمرات مولفه ها بر مبناي ماكسيمم اندازه پايايي، و وزني كردن مولفه ها بر اساس ماكسيمم كردن روايي نمرات مركب است. در اين مقاله، رويكرد به دست آوردن حداكثر پايايي را در دو نظريه كلاسيك آزمون‌سازي و نظريه سيوال- پاسخ معرفي و ضمن بيان نقاط ضعف و قوت هر روش، برآورد پايايي نمره مركب و خطاي استاندارد اندازه گيري در اين روش‌ها براي داده-هاي شبيه سازي شده بررسي خواهيم كرد.

An important issue in obtaining the score in a composite test is the status of combining to combine different component scores of the test to compute the total scores of examinees. These weights should be selected in a manner that not only considers the psychometric properties of each component and their determining elements, but also minimizes the difference between the observed score and the real score of each examinee which explains his/her real ability. In other words, the framework of decision-making is designed with respect to different considerations such as validity, test times, reliability, etc. There have been suggestions for obtaining to obtain the maximum reliability of composite scores in the last few decades. These include the implicit approach and the explicit approach. The implicit approach involves adding the raw scores and using IRT model. The explicit approach involves weighting the components by the difficulty of the items, assigning the weights to component scores based on the reliability measures of the components, and weighting the components by maximizing the validity of the composite scores. In this paper, we introduce the approach of obtaining the maximum reliability in Classical Test Theory and Item Response Theory. Besides considering the pros and cons of each method, we investigate the estimates of the reliability and the standard error of measurement of the composite scores for data in a simulation study.