Comparability of Computer-based and Paper-based Versions of Writing Section of PET in Iranian EFL Context

تكنولوژي كامپيوتر به طراحان آزمون اين امكان را داده است كه بتوانند نسخه كامپيوتري آزمونهاي سنتي ورقه اي را بوجود آورند. نسخه هاي جديد تستهاي TOEFL and Cambridge IELTS, BULATS, KET, PET نمونه هاي خوبي از آزمونهاي كامپيوتري هستند. از آنجا كه اين شيوه نوين آزمون مي تواند فاكتورهاي تعيين كننده جديدي از قبيل روش (رسانه) ارايه آزمون، آشنايي با كامپيوتر و غيره را وارد مقوله سنجش زبان كند، اين سوال ممكن است پيش بيايد كه آيا دو روش آزمون كامپيوتري و ورقه اي بطور قابل مقايسه اي يك توانايي را مي سنجند، و آيا مي توان نمرات بدست آمده از اين دو روش را بعنوان معادل يكديگر بكار برد؟ در همين راستا تحقيق حاضر قابليت قياس نسخه هاي كامپيوتري و ورقه اي يك آزمون نگارش را بررسي مي كند تا مشخص كند كه آيا روش (رسانه) ارايه آزمون و نيز ميزان آشنايي با كامپيوتر مي تواند تغييري نا مرتبط با توانايي مد نظر ( توانايي نگارش) را در نمرات ايجاد كند. داده هاي اين تحقيق از برگزاري بخش نگارش آزمون PET در دو روش كامپيوتري و ورقه اي با 80 نفر زبان آموز ايراني سطح متوسط بدست آمد. بعلاوه، با استفاده از يك پرسشنامه معتبر آشنايي با كامپيوتر، زبان آموزان به دو گروه "بيش آشنا" و " كم آشنا" با كامپيوتر تقسيم شدند. نتايج آزمون t گروههاي مستقل نشان داد كه از لحاظ آماري تفاوت معناداري بين نمرات زبان آموزان در آزمون نگارش كامپيوتري و ورقه اي وجود ندارد. نتايج آزمون t گروههاي وابسته نيز حاكي از اين بود كه در در آزمون نگارش كامپيوتري از لحاظ آماري تفاوت معناداري بين نمرات زبان آموزان "بيش آشنا" و " كم آشنا" با كامپيوتر وجود ندارد. بر اساس نتايج تجزيه و تحليل داده ها و نيز بررسي ميزان همبستگي نمرات در دو روش كامپيوتري و ورقه اي اينگونه نتيجه گيري شد كه اين دو روش (رسانه) ارايه آزمون بطور قابل مقايسه اي يك توانايي را مي سنجند.

Computer technology has provided language testing experts with opportunity to develop computerized versions of traditional paper-based language tests. New generations of TOEFL and Cambridge IELTS, BULATS, KET, PET are good examples of computer-based language tests. Since this new method of testing introduces new factors into the realm of language assessment ( e.g. modes of test delivery, familiarity with computer, etc.),the question may be whether the two modes of computer- and paper-based tests comparably measure the same construct, and hence, the scores obtained from the two modes can be used interchangeably. Accordingly, the present study aimed to investigate the comparability of the paper- and computer-based versions of a writing test. The data for this study were collected from administering the writing section of a Cambridge Preliminary English Test (PET) to eighty Iranian intermediate EFL learners through the two modes of computer- and paper-based testing. Besides, a computer familiarity questionnaire was used to divide participants into two groups with high and low computer familiarity. The results of the independent samples t-test revealed that there was no statistically significant difference between the learnersʹ computer- and paper-based writing scores. The results of the paired samples t-test showed no statistically significant difference between high- and low-computer-familiar groups on computer-based writing. The researchers concluded that the two modes comparably measured the same construct.