سنجش مقايسه‌پذيري سازه و تحليل كاركرد افتراقي سيوال‌ها (DIF) و بلوك‌هاي (DTF)آزمون علوم پايه هشتم تيمز 2007 در بين دانش‌آموزان ايران و آمريكا

Assessment of Structural Comparability and Analysis of Differential Item Functioning (DIF) and Differential Test Functioning (DTF) of TIMSS 2007 8th-Grade Science Test among Iranian and American Stude

در سنجش‌هاي بين‌المللي مانند تيمز و پرلز لازم است تا آزمون‏هاي مورد استفاده از هم‌ارزي سازه كه به مقايسه‌پذيري سازه معروف است برخوردار بوده و سيوال‌ها تا حد ممكن براي تمام كشورها و گروه‏هاي مشاركت‌كننده، يكسان عمل نمايند. در پژوهش حاضر تلاش شد تا مقايسه‌پذيري سازه‌اي آزمون علوم پايه هشتم (سوم راهنمايي) تيمز 2007 و كاركرد افتراقي سيوال‌هاي آن در بين دانش‌اموزان ايران و آمريكا و همچنين ميزان تاثير سيوال‌هاي داراي كاركرد افتراقي بر عملكرد دانش‌آموزان ايراني مورد بررسي قرار گيرد. براي تحليل داده‌ها و پاسخگويي به سيوال‌هاي پژوهش از تركيبي از رويكردهاي تحليل عاملي تاييدي و نظريه سيوال ـ پاسخ استفاده شد. نتايج حاصل از تحليل عاملي تاييدي نشان مي‌دهد كه آزمون علوم از مقايسه‌پذيري سازه در بين دو گروه مورد مطالعه برخوردار است. اين يافته بدان معنا است كه دانش‌آموزان دو كشور ايران و آمريكا براي دادن پاسخ به سيوال‌هاي علوم از چارچوب مفهومي يكساني استفاده مي‌كنند. با اين حال، نتايج حاصل از تحليل كاركرد افتراقي سيوال‌ها نشان مي‌دهد 62% سيوال‌هاي درس علوم تيمز 2007 عليه دانش‌آموزان ايران از كاركرد افتراقي برخوردارند. به طور خلاصه، به نظر مي‌رسد كه عملكرد ضعيف دانش‌آموزان ايران در درس علوم تيمز 2007 را نمي‌توان به كاركرد افتراقي سيوال‌ها نسبت داد و بايستي علل آن را جايي ديگر جستجو كرد. مسيولان وزارت آموزش و پرورش و متوليان امر آموزش در كشور بايستي تلاش كنند تا با تهيه محتواهاي آموزشي مناسب، مفاهيم مهم هر حوزه را به صورت زنجيره‌وار و در ارتباط با يكديگر آموزش دهند و تلاش كنند تا توانايي و مهارت تفكر واگرا و چند بُعدي را در دانش‌آموزان پرورش دهند. همچنين بايستي تلاش شود تا از روش سنتي آموزش كه به شكل سخنراني و عمدتا نظري صورت مي‌گيرد فاصله گرفت و دانش‌آموزان را درگير فعاليتهاي عملي و آزمايشگاهي نمود.

It is necessary for international tests, such as TIMSS and PIRLS, to have Structural Equivalence, also known as Structural Comparability. In other words, test items should be functionally identical for all the participant countries and groups. The present research was an attempt to examine the structural comparability of TIMSS 2007 8th-Grade Science Test and differential functioning of its items among Iranian and American students, as well as the effect of items with differential functioning on the performance of Iranian students. A combination of confirmatory factor analysis and Item Response Theory was used to analyze the data and answer research questions. The results of factor analysis indicated that the science test had structural comparability between the two groups. This finding suggests that both Iranian and American students use an identical conceptual framework to answer the test items. However, the results of differential item functioning analysis indicated that 62% of TIMSS 2007 8th-Grade Science Test items had differential functioning against Iranian students. In short, the poor performance of Iranian students in TIMSS 2007 Science Test cannot be attributed to differential item functioning, and the causes should be sought elsewhere. Ministry of Education officials and administrators should try to teach the key concepts of any field in an interrelated manner and to cultivate divergent and multidimensional thinking skills and ability in students by preparing appropriate educational contents. Moreover, attempts must be made to distance the system from the traditional method of teaching, which mainly consisted of theoretical lectures, and involve students in practical and laboratory activities.