بررسي روايي و پايايي شيوه‏هاي نمره‏گذاري آزمون‏هاي مبتني بر نقشه مفهومي

Examining the validity and reliability of concept map-based tests scoring methods

با گسترش استفاده از نقشه‏هاي مفهومي به عنوان ابزارهاي اندازه‏گيري پيشرفت تحصيلي، نمره‏گذاري آنها به مبحثي چالش‏انگيز تبديل شده است. در اين پژوهش به معرفي سه شيوه نمره‏گذاري به آزمون‏هاي نقشه مفهومي مي‏پردازيم: (1) روش رابطه‏اي كه در آن به رابطه بين مفاهيم به طور جداگانه نمره‏اي اختصاص داده مي‏شود. (2) روش ساختاري كه براساس سازمان سلسله مراتبي موجود بين مفاهيم نمره داده مي شود. (3) روش شباهت كه در آن با توجه به مقايسه نقشه مفهومي دانش‏آموز با يك نقشه مفهومي معلم براي هر بخش از نقشه نمره‏اي ارايه مي‏شود. براي تشخيص مناسب‏ترين شيوه نمره‏گذاري از بين اين شيوه‏ها از سه شاخص روايي ملاكي، پايايي نمره‏گذاران و روايي افتراقي استفاده شد. نمونه آماري پژوهش 105 نفر از دانش‏آموزان سال دوم متوسطه شهر تبريز در سال تحصيلي 88-1387 بودند كه در چهار كلاس حضور داشتند. يافته‏هاي پژوهش نشان دادند كه روش نمره‏دهي رابطه‏اي از لحاظ اين شاخص‏ها نسبت به دو روش ديگر داراي مقادير بالاتري است و روش نمره‏دهي شباهت نيز نسبت به دو روش ديگر داراي پايين‏ترين شاخص‏هاي آماري است.

Background:Concept maps usage expanding as an academic achievement measurement tools great a challenge in scoring them. This study introduces three scoring methods of the concept maps tests: (1) relational method that in which a relationship between concepts separately was scored. (2) structural method that based on scores was given to hierarchical organization of the concepts. (3) similarity method that in which a student’s concept map compares with a teacher’s concept map and assign score for each section of the map. Objective:The objective of the present research was to examining the validity and reliability of concept map-based tests scoring methods.critical validity, interpreter reliability and discriminative reliability were used to identify the most appropriate method of scoring. Method:the subjects of the research comprised 105 high school students in Tabriz citywho were present in four classes. Results:Results showed that the relational method of scoring has higher quantities of the indicators than other methods. Similarity scoring method has the lowest indices in comparison with two other methods. Conclusion:These findings may have some implications in evaluating studentsʹ academic achievement which will be discussed in this paper.