طراحي و روان سنجي فرم ارزيابي مهارت‌هاي باليني دانشجويان دندانپزشكي در واحد درسي پروتز كامل عملي و بررسي ميزان رضايتمندي ارزيابان (اعضاي هيئت علمي) و ارزيابي شوندگان (دانشجويان)

Designing and comparing psychometric properties of the checklist for clinical skills assessment of dental students in complete denture course and evaluation of raters’ and students’ satisfaction

زمينه و هدف: اهميت بالاي ارزيابي عملكرد باليني دانشجويان علوم پزشكي، انتخاب درست ابزار و روش ارزيابي متناسب با رشته، از اهداف مهم در حيطه آموزش پزشكي مي‌باشد. هدف مطالعه حاضر طراحي ابزار مناسب ارزيابي مهارت‌هاي باليني دانشجويان دندانپزشكي عمومي دانشكده دندانپزشكي دانشگاه علوم پزشكي تهران در واحد درسي پروتز كامل عملي بود. دومين هدف تعيين روايي و پايايي چك ليست و هدف سوم تعيين ميزان رضايتمندي اعضاء هيأت علمي و دانشجويان بود. روش بررسي: چك ليست ارزيابي مهارت‌هاي باليني، طي جلسات پانل تخصصي طراحي شد. روايي و پايايي چك ليست بوسيله روايي محتوايي توسط ضريب لاوشه (CVI) (content validity index) و پايايي، به وسيله بازآزمايي و پايايي بين ارزيابان ارزيابي شد. دانشجويان (تعداد = 15 نفر) با استفاده از فرم جديد ارزيابي شدند. نهايتاً ميزان رضايتمندي دانشجويان و اساتيد بررسي شد. اطلاعات به دست آمده به صورت توصيفي با بيان ميانگين و انحراف معيار و در غالب فراواني‌هاي نسبي و مطلق گزارش شد. يافته‌ها: روايي محتوايي كل چك ليست (CVI) 0/96 و پايايي بيش از 0/8 (بين 0/82 تا 0/97) ( (P<0.05به دست آمد كه مويد روايي و پايايي اين ابزار است. پايايي بين ارزيابان 0/99 (بين 0/991 تا 0/998) بود كه توافق نظر بالاي ارزيابان در نمره دهي به دانشجو با استفاده از اين ابزار را نشان مي‌دهد. درصد بالايي از رضايت مندي ارزيابان و ارزيابي شوندگان به دست آمد. نتيجه گيري: چك ليست طراحي شده، روايي و پاپايي و رضايتمندي را در حد قابل قبولي دارا مي‌باشد، به نظر مي‌رسد كه استفاده از آن بتواند جايگزين مناسبي براي روش سنتي Global rating جهت ارزيابي مهارت‌هاي باليني دانشجويان دندانپزشكي در واحد پروتز كامل عملي باشد.

Background and Aims: Due to the very high importance of assessing the clinical performance of students, choosing the best assessment tool and method is one of the most important goals and tasks in medical education. The objective of this study was the development of a checklist for the assessment of dental students’ clinical skills of Tehran University of Medical Sciences, in the clinical complete denture course. The second aim was to determine the validity and reliability of the checklist, and The third aim was the evaluation of raters’ and students’ satisfaction. Materials and Methods: The checklist was developed in expert panel sessions, and the validity and reliability of the checklist were assessed with CVI (content validity index) test-retest and inter-rater reliability methods, respectively. Students (n=15) were evaluated with a developed checklist. At the end of the session, the satisfaction level of staff and students were assessed. The obtained information was reported descriptively with the expression of mean and standard deviation and in the form of relative and absolute frequencies. Results: The content validity index (CVI) of the checklist was 0.96. The reliability of the checklist confirmed with a high Intraclass Correlation Coefficient (>0.8) (between 0.82-0.97) (P<0.05). The coefficient of agreement in interrater reliability was 0.99 (between 0.991-0.998). Raters’ and students’ satisfaction earned a high percentage of satisfaction. Conclusion: The designed checklist has the optimal features of a good students’ clinical performance assessment tool; it seems that using this checklist can be an excellent alternative method to a global rating scale to assess the clinical skills of dental students in the complete denture courses.