روايي و پايايي آزمون مشاهده مستقيم مهارت هاي عملي (DOPS) در ارزيابي مهارت هاي باليني دانشجويان پرستاري دانشكده پرستاري و مامايي زاهدان

Validity and Reliability of Direct Observation of Procedural Skills in Evaluating the Clinical Skills of Nursing Students of Zahedan Nursing and Midwifery School

زمينه و هدف: مشاهده مستقيم مهارت هاي عملي روشي براي ارزيابي عيني مهارت هاي عملي و دادن بازخورد در دانشجويان است. اين پژوهش با هدف بررسي روايي و پايايي آزمون DOPS ( of Procedural Skills (Direct Observation در پرستاري انجام شد. مواد و روش كار: در مطالعه اي از نوع پژوهش ارزشيابي، 55 دانشجوي پرستاري دوره كارورزي در عرصه دانشكده پرستاري و مامايي زاهدان، به شيوه سرشماري انتخاب شدند. طبق نظرات اعضا هييت علمي دانشگاه هاي علوم پزشكي مستقر در تهران از بين پروسيجرهاي اصلي پرستاري، 8 پروسيجر جهت مواد آزمون انتخاب و چك ليست ارزيابي آنان تهيه شد. دانشجو در حين انجام پروسيجر در محيط كار واقعي توسط آزمونگر مشاهده و نتايج بر طبق چك ليست ساختار يافته ثبت شده و در محيط مناسب بازخورد عيني ارايه گرديد. روايي محتوايي، روايي ملاكي (همبستگي ميانگين نمرات دروس باليني و نظري پرستاري به تفكيك با نمره DOPS ، رابطه هر گويه با نمره DOPS)، روايي سازه (بررسي ساختار دروني) پايايي (تعيين همساني دروني، پايايي بين ارزيابان) بررسي شد. يافته ها: همبستگي نمرات DOPS با ميانگين نمرات نظري و باليني به ترتيب 117/0 (429/0=p) و 376/0 (008/0=p) بود. همبستگي هر مهارت با نمره كل DOPS ارتباط معني داري داشت (001/0=p) كه بيانگر ساختار دروني مطلوب آزمون بود. پايايي آزمون توسط ضريب آلفاي كرانباخ 94/0 اندازه گيري شد. كمترين و بيشترين مقدار ضريب همبستگي در پايايي بين ارزيابان به ترتيب 42/0 و84/0 بود كه در تمام موارد معني دار (001/0=p) بودند. نتيجه گيري: با توجه به نتايج مطالعه،استفاده از DOPS براي سنجش عيني مهارت هاي پروسيجرال در پرستاري داراي روايي و پايايي مي باشد. ]م ت ع پ ز، 1391; 14(2): 81-76[

Background: To evaluate the validity and reliability of assessing the performance of nursing students using the Direct Observation of Procedural Skills (DOPS). Materials and Method: This research was conducted on 55 nursing internship students in 8 procedures. A DOPS consisted of an assessor observing a student when performing skills, completing a checklist with the student and providing verbal feedback. The procedures were selected among the core skills of nursing according to the views of faculty members. Content validity, criterion validity (correlation the average scores of nursing clinical and theoretical courses separately with DOPS score, relation of each item with DOPS), construct validity (inspection of internal construction), reliability (examination of internal consistency, inter-rater reliability) were examined. Results: Correlation of DOPS scores with the theoretical and clinical average scores were 0.117 (p=0.429) and 0.376 (p= 0.008) respectively. There has been a significant relation between each skill and DOPS total score (p= 0.001) that indicates a desired internal construction of the exercise. The reliability of the exercise was measured as 94% by Cronbach alpha coefficient. Minimum and maximum correlation coefficient in the inter-rater reliability were 42% and 84% respectively which were significant in all cases (p=0 .001). Conclusion: In conclusion, our results showed that DOPS has the validity and reliability for objective evaluation of procedural skills in nursing. [ZJRMS, 2012; 14(2): 76-81]