استخدام أسلوب فيسكا لمقارنة درجات الممتحنين وتعديلها بالفيديو في اختبار سريري موضوعي منظم موزع عبر مواقع متعددة

يمثل ضمان تكافؤ أحكام الممتحنين داخل الاختبارات السريرية الموضوعية المنظمة الموزعة عبر مواقع متعددة عنصرًا أساسيًا لتحقيق العدالة والصدق في تقييم طلاب الطب، غير أن هذا الضمان يعترضه غياب التداخل بين الأداءات التي يلاحظها كل فريق من الممتحنين، فكل مجموعة ممتحنين ترى مجموعة مختلفة من الطلاب، مما يصعب معه معرفة ما إذا كانت الفروق في الدرجات راجعة إلى اختلاف مستويات الطلاب أم إلى اختلاف شدة الممتحنين ولينهم في منح الدرجات عبر المواقع

وتكتسب هذه القضية أهمية متزايدة مع توسع كليات الطب في توزيع اختباراتها العملية على مستشفيات ومواقع تدريبية متعددة، وتقدم هذه الدراسة للباحثين وطلاب الدراسات العليا في القياس والتقويم التربوي والتعليم الطبي أسلوبًا مبتكرًا لمعالجة هذه المشكلة، إذ طورت أسلوبًا جديدًا يسمى مقارنة درجات الممتحنين وتعديلها المعتمد على الفيديو ويعرف اختصارًا باسم فيسكا، واستخدمته لأول مرة لمقارنة درجات الممتحنين في مواقع مختلفة من مواقع الاختبار

أولًا: أهداف الدراسة ومنهجيتها

هدفت الدراسة إلى تطوير أسلوب فيسكا وتطبيقه لمقارنة تأثيرات الممتحنين بين المواقع المختلفة في اختبار سريري موضوعي منظم موزع، وطُبق الأسلوب داخل اختبار تجميعي مؤلف من 16 محطة، صُوّر فيه طلاب متطوعون بالفيديو في كل محطة، ودُعي جميع الممتحنين إلى منح درجات لمقاطع فيديو مقارنة خاصة بكل محطة إضافة إلى منحهم الدرجات المعتادة للطلاب، وأتاح الربط المتحقق عبر درجات الفيديو استخدام نمذجة راش متعددة الأوجه لمقارنة أثرين في درجات الطلاب، أثر مجموعات الممتحنين وأثر الموقع الذي أُجري فيه الاختبار

ثانيًا: أبرز النتائج

1. تباينت مجموعات الممتحنين فيما بينها بنسبة 6.9 في المئة في الدرجة الكلية الممنوحة لطلاب يتمتعون بالمستوى نفسه من القدرة، مما يكشف أثرًا ملموسًا لاختلاف الممتحنين في الدرجات

2. ظهر فرق ضئيل فقط بين المواقع في الدرجات الممنوحة، غير أن تباين مجموعات الممتحنين كان أكبر في أحد الموقعين منه في الموقع الآخر

3. أدى تعديل درجات الطلاب في ضوء هذه الفروق إلى تغير وسيط مقداره 6 مراكز في ترتيب الطلاب بما يعادل 0.48 من الدرجة العشرية، وتغير ترتيب 26.9 في المئة من الطلاب بمقدار درجة عشرية واحدة على الأقل

4. لم يتغير تصنيف النجاح والرسوب لدى الطلاب بفعل تعديل الدرجات إلا في حالة طالب واحد فقط، مما يشير إلى محدودية أثر التعديل في القرارات الحدية للاختبار

ثالثًا: دلالات الدراسة وتطبيقاتها

تثبت هذه الدراسة جدوى استخدام أسلوب فيسكا لأغراض ضمان الجودة في الاختبارات السريرية الموضوعية المنظمة الموزعة واسعة النطاق، فهو يتيح كشف فروق الشدة واللين بين الممتحنين والمواقع ومعالجتها إحصائيًا بما يعزز عدالة الدرجات وصدقها، ومع ذلك ينبغي تفسير نتائج تعديل الدرجات في هذه الدراسة بحذر نظرًا إلى محدودية معدلات مشاركة الممتحنين نسبيًا، وهو قيد يدعو إلى دراسات لاحقة بمشاركة أوسع، كما تفيد النتائج مخططي الاختبارات العملية في كليات الطب عند بناء إجراءات ضبط الجودة وضمان التكافؤ بين مواقع التقييم المتعددة

وتنبع قيمة أسلوب فيسكا من أنه يستثمر التسجيل المرئي لأداءات الطلاب بوصفه حلقة وصل تتيح مقارنة الممتحنين الذين لم يلتقوا عمليًا على الأداءات نفسها، وهو بذلك يعالج مشكلة بنيوية في الاختبارات الموزعة تتمثل في انفصال مجموعات الممتحنين بعضها عن بعض عبر المواقع المختلفة، كما أن نمذجة راش متعددة الأوجه تتيح فصل أثر قدرة الطالب عن أثر شدة الممتحنين وأثر الموقع فصلًا كميًا منظمًا، وبذلك تصبح قرارات ضمان الجودة في الاختبارات العملية قائمة على أدلة قابلة للقياس بدل الانطباعات العامة، بما يعزز ثقة المؤسسات التعليمية والطلاب بعدالة نتائج التقييم السريري واتساقها

وخلاصة القول إن أسلوب فيسكا يقدم أداة عملية واعدة لضمان عدالة التقييم السريري الموزع، إذ يكشف تباين أحكام الممتحنين ويتيح تعديل الدرجات على أساس إحصائي سليم، ويظل تطوير تطبيقه بمشاركة أكبر من الممتحنين خطوة لاحقة ضرورية لتعظيم الاستفادة منه في منظومات الاختبارات الطبية