تمهيد
تعد المراجعة الإحصائية ركيزة أساسية لضمان جودة البحوث العلمية ونزاهتها، إذ تتحقق من سلامة اختيار الأساليب الإحصائية ودقة الحسابات التي تبنى عليها النتائج والاستنتاجات، غير أن المراجعة اليدوية التقليدية التي يقوم بها الإحصائيون والمحكمون تتسم بالبطء وعدم الكفاءة في ظل التزايد الهائل في أعداد المخطوطات المقدمة للنشر، وفي المقابل تقدم النماذج اللغوية الكبيرة إمكانات واعدة لدعم هذه العملية، لكن استخدامها دون توجيه يبقى غير موثوق في الحسابات الدقيقة ويثير مخاوف جدية تتعلق بالمساءلة عمن يتحمل مسؤولية الخطأ، وتقع هذه الدراسة عند تقاطع هذين الاعتبارين، إذ تبحث ما إذا كان بالإمكان تقييد نموذج لغوي كبير بموجه منظم قائم على القواعد ليؤدي المراجعة الإحصائية لبيانات فئوية مقارنة بدقة يمكن الوثوق بها، وما المخاطر الكامنة في هذا الاستخدام من منظور المساءلة العلمية
أولًا: أهداف الدراسة ومنهجيتها
هدفت الدراسة الاستكشافية إلى تقييم قدرة موجه منظم قائم على القواعد على تقييد نموذج لغوي كبير بصورة موثوقة لأداء المراجعة الإحصائية للبيانات الفئوية المقارنة، وتوصيف جدوى هذا النهج ومخاطره المتأصلة من منظور المساءلة، واعتمدت تصميمًا من مرحلتين باستخدام نموذج ديب سيك، ففي المرحلة الأولى طورت موجهًا منظمًا عبر عشرات الدورات من الاختبار والفشل والتكرار باستخدام 20 مقالة طبية منشورة، إذ أسند الموجه إلى النموذج دور خبير في الإحصاء وزوده بمجموعة مغلقة من قواعد الحساب وبسير عمل يقوم على التعرف على البيانات ثم اختيار صيغة الحساب المناسبة ثم إجراء الحساب، ويشمل اختبارات مثل اختبار مربع كاي لبيرسون وتصحيح الاستمرارية واختبارات ماكنيمار، وفي المرحلة الثانية قيمت أداء الموجه النهائي على مجموعة اختبار تضم 20 مخطوطة مستقلة، وقورنت مخرجات النموذج بنتائج حسبها إحصائي أول بوصفها المعيار الذهبي، وشملت مقاييس الأداء دقة اختيار الأسلوب الإحصائي ودقة الحساب العددي والحساسية والنوعية والقيم التنبؤية ومعامل اتفاق كابا وإمكانية إعادة الإنتاج والكفاءة الزمنية
ثانيًا: أبرز النتائج
1، ضمت مجموعة الاختبار 15 مخطوطة بعينات مستقلة و5 مخطوطات بعينات مقترنة، وحقق النموذج في تقييم ملاءمة اختيار الأسلوب الإحصائي عبر 148 بند تحليل دقة قدرها 99.3 في المئة إذ أصاب في 147 بندًا من أصل 148، وحساسية قدرها 96.2 في المئة ومقياس إف واحد قدره 98.0 في المئة ومعامل اتفاق كابا قدره 0.976
2، في اختبار اتساق الحساب عبر 97 اختبارًا للعينات المستقلة بلغت دقة اتساق قيم مربع كاي 94.8 في المئة ودقة اتساق قيم الدلالة 96.9 في المئة، وفي تحليل العينات المقترنة تطابقت أساليب النموذج ونتائجه تمامًا مع المراجعة اليدوية، وأزال تحسين الموجه الفروق التي كانت تظهر في قواعد حساب درجات الحرية
3، لم يظهر فرق دال إحصائيًا في الزمن المستهلك بين النموذج بواقع 407 ثوان والمراجعة اليدوية بواقع 374 ثانية إذ بلغت قيمة الدلالة 0.601، وتجاوزت معاملات الارتباط داخل الفئة لقيم مربع كاي وقيم الدلالة 0.91 في اختبارات إعادة الإنتاج بما يشير إلى ثبات مرتفع نسبيًا في المخرجات الرقمية
4، كشف التحليل النوعي عن ثلاثة أنماط فشل نموذجية في سير عمل النموذج، أولها عدم الاستقرار إذ يخفق النموذج في إنتاج مخرجات متماثلة عبر مرات التشغيل المتكررة فيختلف استخراج البيانات أو يهمل معالجة جميع المهام المحددة، وثانيها تدهور الأداء أو سلوك الكسل إذ تنخفض جودة التنفيذ في المهام الطويلة أو المعقدة فيتخلى النموذج عن منطق الاستدلال وينسخ قيم المؤلفين دون تحقق، وثالثها أثر التثبيت إذ يفرط النموذج في الاعتماد على القيم الإحصائية التي يقدمها المؤلفون فتتأثر عملية التحقق لديه بها تأثرًا غير واجب
ثالثًا: دلالات الدراسة وتطبيقاتها
خلصت الدراسة إلى أن الموجه المنظم القائم على القواعد يستطيع توجيه النموذج اللغوي الكبير إلى تحقيق دقة عالية في مهام المراجعة الإحصائية الموحدة، لكن موثوقيته تبقى مشروطة بالاستقرار التشغيلي، وأن أنماط الفشل المتأصلة ومنها عدم استقرار الأداء وأثر التثبيت القوي على بيانات المؤلفين قد تؤدي إلى أخطاء جسيمة ولا سيما حين تكون البيانات المصدر معيبة، ولذلك فإن هذه النماذج غير مناسبة للتدقيق المستقل الذاتي، وأنسب تطبيقاتها أن تعمل أدوات مساعدة ضمن إطار يبقي الإنسان داخل الحلقة مع إشراف بشري صارم يخفف المخاطر ويحفظ المساءلة النهائية، وتحمل هذه الرسالة دلالة مباشرة للمجلات العلمية والمؤسسات البحثية والباحثين العرب المهتمين بتوظيف الذكاء الاصطناعي في النشر العلمي ونزاهة البحث، إذ تدعو إلى التبني الحذر الموجه بالقواعد لا الاعتماد الأعمى على مخرجات النماذج
وخلاصة القول إن النماذج اللغوية الكبيرة حين تقيد بموجهات منظمة قائمة على القواعد تستطيع أداء المراجعة الإحصائية الموحدة بدقة عالية تنافس المراجعة اليدوية، لكن أنماط فشلها المتأصلة في الاستقرار والتحقق تجعل الإشراف البشري شرطًا لا غنى عنه، فتكون قيمتها الحقيقية في مساعدة المحكمين والإحصائيين لا في الحلول محلهم
