تصنيف النصوص المرتبطة بالتضليل ونصوص الإنسان والذكاء الاصطناعي: تباين مهام المقارنة المعيارية وحدود النقل بين المجالات

تستخدم الخصائص الأسلوبية وتضمينات محولات الجمل المجمدة مدخلات منخفضة الكلفة في تصنيف النصوص المرتبطة بالتضليل الإعلامي، غير أن مهام المقارنة المعيارية المتغايرة نادرًا ما تقارن ضمن بروتوكول موحد، فيستحيل معرفة ما إذا كانت الفروق المرصودة تعود إلى الطريقة أم إلى طبيعة المهمة ذاتها، وتعالج هذه الدراسة هذا الغموض بتقويم الطرائق المتنافسة على مجموعة واسعة من المقاييس ببروتوكول واحد، مع فحص قابلية نقل النماذج بين المهام والمجالات المختلفة، وتكتسب هذه المسألة أهمية متزايدة مع انتشار أدوات تزعم كشف النصوص المولدة آليًا والمحتوى المضلل في التعليم والنشر والإعلام، واعتماد قرارات عملية عليها رغم غياب أدلة على قابليتها للنقل بين المجالات

أولًا: أهداف الدراسة ومنهجيتها

قومت الدراسة أربع طرائق هي تكرار المصطلح ومعكوس تكرار الوثيقة، وبطارية أسلوبية من 22 خاصية، وتضمينات سينتنس بيرت المجمدة، ونموذج روبرتا المضبوط بدقة، وذلك عبر خمسة عشر مقياسًا معياريًا للغة الإنجليزية بلغ مجموع بياناتها 24906 نصوص، وتضمنت خمس مدونات لمصدرية نصوص الإنسان والذكاء الاصطناعي، وحللت الدراسة قيم المساحة تحت منحنى خصائص التشغيل تحليلًا وصفيًا مقسمًا بحسب فئات المهام والمقاييس داخلها، واستخدمت تبديلًا دقيقًا لوسوم المقاييس لاختبار الدلالة، وقاست النقل بين المهام بمتوسط الأداء خارج القطر، وفحصت حساسية النتائج لمطابقة الأحرف المحفوظة ولتخطيطات وسوم بديلة في مدونات الكذب ولمدخلات عشوائية

ثانيًا: أبرز النتائج

أظهرت النتائج هيمنة تباين المهام على تباين الطرائق وضعف النقل بين المقاييس، ومن أبرزها ما يلي

1، عزا تقسيم وصفي لمجموع المربعات الكلي نسبة 71.8 في المئة منه إلى متوسطات فئات المهام و13.7 في المئة إلى المقاييس داخل الفئات، وإن بقيت الفئة متداخلة مع بناء المقياس ومصدره ومجاله وتخطيط وسومه وعينته

2، بلغ متوسط مساحة النقل خارج القطر 0.492 للأسلوبية و0.507 لسينتنس بيرت بعد تصحيح ثلاث توجهات للوسوم، وهو مستوى يقترب من التخمين العشوائي ويعني أن النموذج المدرب على مهمة لا ينتقل عمليًا إلى مهمة أخرى

3، خفضت مطابقة الأحرف المحفوظة مساحة الطول وحده إلى نحو 0.50، بينما احتفظت الطرائق منخفضة الكلفة بمساحات تراوحت من 0.779 إلى 0.999 في أربعة مقاييس قابلة للتقدير لنصوص الإنسان والذكاء الاصطناعي، وافتقرت إحدى مدونات نصوص الذكاء إلى دعم مشترك

4، غيرت تخطيطات الوسوم البديلة في مدونات الكذب التقديرات الفردية وترتيب الطرائق، وكانت حساسية المدخلات العشوائية معتمدة على الطريقة، إذ هبطت مساحة الطول وحده في مقياس ميج من 0.936 إلى وسيط قدره 0.476 وفي مدونة نصوص الذكاء من 1.000 إلى 0.560

ثالثًا: دلالات الدراسة وتطبيقاتها

تدعم هذه النتائج التحقق الخاص بكل مقياس وبكل مجال مستهدف، لا فكرة كاشف عالمي موحد للتضليل أو لنصوص الذكاء الاصطناعي، وتفيد الباحثين العرب وطلاب الدراسات العليا في معالجة اللغة الطبيعية وأمن المعلومات بأن الأرقام القياسية المعلنة لأدوات الكشف قد تعكس خصوصيات بنائية في مقاييسها أكثر مما تعكس قدرة حقيقية قابلة للتعميم، وأن اختبار النقل والتحكم في أثر الطول وتدقيق تخطيط الوسوم خطوات لا غنى عنها قبل اعتماد أي مصنف في سياقات النشر والتحقق من الأخبار

وتحمل النتائج رسالة مباشرة للمؤسسات التعليمية ووسائل الإعلام ومنصات النشر التي تعتمد أدوات كشف النصوص المولدة آليًا في قراراتها، إذ تبين أن الحكم على طالب أو كاتب اعتمادًا على كاشف قوم في مجال آخر قد يظلم الأبرياء ويمرر المحتالين في آن واحد، وتدعو الباحثين العرب وطلاب الدراسات العليا إلى بناء مقاييس معيارية عربية خاصة بهذا الغرض تراعي خصائص النص العربي وأساليبه، والتحقق محليًا من أي أداة قبل توظيفها في سياقات النزاهة الأكاديمية والتحقق الصحفي، فالفجوة التي رصدتها الدراسة في الأدبيات الإنجليزية مرشحة لأن تكون أوسع في لغات لم تبن لها مقاييس أصلية بعد

وخلاصة القول إن الدراسة أثبتت ببروتوكول موحد واسع أن مهمة المقارنة المعيارية هي المتغير الحاكم في أداء مصنفات النصوص منخفضة الكلفة، وأن النقل بين المهام شبه معدوم، بما يفرض تقويمًا محليًا لكل تطبيق مستهدف بدل الثقة بكاشفات تدعي العالمية، ويمثل هذا التنبيه المنهجي إسهامًا عمليًا في ضبط التوقعات من تقنيات الكشف النصي وضمان استخدامها المسؤول