يعد فهم العوامل المؤثرة في الاستجابة غير المتسقة على المقاييس مختلطة الصياغة أمرًا حاسمًا لضمان صدق نتائج درجات الاستبانات، فالمقاييس التي تجمع بين فقرات مصاغة إيجابيًا وأخرى مصاغة سلبيًا قد تدفع بعض المستجيبين إلى إجابات متناقضة لا تعكس مواقفهم الحقيقية، ومن ثم تضعف جودة البيانات التي تبنى عليها القرارات والبحوث والسياسات التعليمية
ومن العوامل التي يثار حولها التساؤل نمط التقييم الذي يخضع له الطالب قبل الإجابة عن الاستبانة، وما إذا كان أداؤه اختبارًا رقميًا أو ورقيًا يترك أثرًا في اتساق استجاباته اللاحقة، وقد تناولت هذه الدراسة هذه المسألة مستندة إلى بيانات دولية واسعة من دراسة الاتجاهات الدولية في الرياضيات والعلوم المعروفة باسم تيمس لعام 2019
وتكتسب هذه المسألة أهمية متزايدة مع التحول العالمي في الدراسات التقويمية واسعة النطاق من الاختبارات الورقية إلى الاختبارات الرقمية القائمة على الحاسوب، فحين يؤدي الطالب اختبارًا رقميًا ثم يجيب عن استبانة ورقية عن مواقفه ومفهومه لذاته، يثور تساؤل منهجي حول ما إذا كان انتقاله بين النمطين يؤثر في طريقة استجابته لفقرات الاستبانة واتساق إجاباته عليها
أولًا: أهداف الدراسة ومنهجيتها
هدفت الدراسة إلى فحص ما إذا كان نمط التقييم، بمعنى مشاركة الطالب في اختبار تحصيلي رقمي أو ورقي، يرتبط بانتشار الاستجابة غير المتسقة على مقياس مختلط الصياغة في استبانة طبقت مباشرة بعد الاختبار، واستخدمت الدراسة بيانات طلاب الصفين الرابع والثامن من 16 دولة شاركت في دراسة تيمس لعام 2019، وقاس المقياس مختلط الصياغة الذي أجاب عنه الطلاب بأنفسهم مفهوم الذات في الرياضيات، وطُبق بصيغة ورقية على جميع الطلاب، واستخدمت الدراسة طريقتين لتحديد المستجيبين غير المتسقين هما طريقة متوسط الفرق المطلق وطريقة التحليل العاملي الخليطي
ثانيًا: أبرز النتائج
1. لوحظ تباين عبر الثقافات في انتشار الاستجابة غير المتسقة بين الدول المشاركة، بما يشير إلى أن الظاهرة لا تتخذ صورة واحدة في جميع السياقات الثقافية والتعليمية
2. انخرط طلاب الصف الرابع الذين أدوا التقييم القائم على الحاسوب قبل الاستبانة في استجابات غير متسقة بتكرار أعلى قليلًا من زملائهم الذين أدوا التقييم الورقي
3. كان الفرق بين نمطي التقييم لدى طلاب الصف الثامن أصغر، وانعكس اتجاهه في عينات عدة دول، فلم يعد التقييم الرقمي مرتبطًا دائمًا بمزيد من عدم الاتساق
4. أظهرت طريقة التحليل العاملي الخليطي انتشارًا أكبر للاستجابة غير المتسقة مقارنة بطريقة متوسط الفرق المطلق، بما يدل على حساسية النتائج للطريقة المستخدمة في تحديد المستجيبين غير المتسقين
ثالثًا: دلالات الدراسة وتطبيقاتها
تؤكد الدراسة الحاجة إلى مزيد من البحث في الاستجابة غير المتسقة عبر أنماط التقييم والسياقات المختلفة، فانتقال الدراسات الدولية واسعة النطاق من الصيغ الورقية إلى الرقمية يفرض عناية خاصة بجودة بيانات الاستبانات المرافقة للاختبارات، كما تفيد النتائج مصممي الاستبانات والباحثين في منهجية الدراسات المسحية بضرورة فحص اتساق الاستجابات بطرائق متعددة، ومراعاة عمر الطلاب وصفهم الدراسي عند تفسير درجات المقاييس مختلطة الصياغة في الدراسات الدولية والمحلية
وعلى مستوى الممارسة، تدعو النتائج مصممي الدراسات الدولية إلى توثيق نمط التقييم السابق للاستبانة بوصفه متغيرًا منهجيًا يستحق الرصد والتحليل، وإلى توخي الحذر عند مقارنة درجات مفهوم الذات والاتجاهات بين الدول والصفوف، فجزء من الفروق الظاهرة قد يعود إلى عوامل منهجية في جمع البيانات لا إلى فروق حقيقية في اتجاهات الطلاب، كما تعزز النتائج أهمية الجمع بين أكثر من طريقة إحصائية عند فحص جودة الاستجابات قبل اعتمادها في التحليلات النهائية
وتزداد قيمة هذه النتائج في ضوء توسع الدراسات الدولية المقارنة واعتمادها المتزايد على الاستبانات المرافقة للاختبارات في قياس الاتجاهات ومفهوم الذات والبيئات التعليمية عبر الدول المشاركة فيها
وخلاصة القول إن نمط التقييم السابق للاستبانة قد يترك أثرًا محدودًا ومتباينًا في اتساق استجابات الطلاب، وهو أثر يختلف باختلاف الصف الدراسي والدولة وطريقة التحليل، ويبقى ضمان صدق بيانات المقاييس النفسية والتربوية مهمة منهجية مستمرة تستدعي يقظة الباحثين في الدراسات المحلية والدولية على حد سواء
