مقاييس تقييم أداء النماذج اللغوية الكبيرة المتعاطفة

مع التقدم السريع في النماذج اللغوية الكبيرة، أظهرت الأنظمة الحديثة قدرة متنامية على فهم مشاعر الإنسان والتعبير عنها في سياقات المحادثة، وهو تطور يفتح آفاقًا واسعة لتطبيقات الدعم النفسي والتعليمي والخدمي، غير أن هذا التقدم يواجه فراغًا قياسيًا واضحًا، إذ لا يوجد حتى الآن مقياس موضوعي وموحد لتقييم مدى تعاطف استجابة النموذج اللغوي مع المستخدم، وهو غياب يجعل مقارنة النماذج وتطويرها في هذا البعد الإنساني الدقيق عملية انطباعية يصعب التحقق منها أو البناء عليها منهجيًا

ولمعالجة هذه الفجوة اقترحت الدراسة إطار تقييم جديدًا يقيس المواءمة بين استفسار المستخدم والاستجابة المولدة من النموذج على مستويي المشاعر العامة والانفعالات الدقيقة، ويضيف مكونًا دلاليًا يقيم الصلة السياقية والتماسك، بهدف توفير أداة قياس مركبة تلتقط شدة التعاطف وفروقه الدقيقة، وتؤسس لتطوير ذكاء اصطناعي حواري ذكي وجدانيًا يمكن قياس تقدمه وتحسينه بموضوعية

أولًا: أهداف الدراسة ومنهجيتها

هدفت الدراسة إلى بناء إطار تقييم موضوعي وموحد لقياس تعاطف النماذج اللغوية الكبيرة، يتكون المقياس المقترح فيه من مكونين رئيسين، أولهما مكون المشاعر الذي يقيم القطبية الوجدانية العامة عبر أداة سينت لينك، ويقيم طبيعية التعبير الوجداني عبر أداة إن إمباثي سورت، وثانيهما مكون الانفعال الذي يقيس التوافق الانفعالي الدقيق باستخدام أداة إيمو سايت، وذلك لالتقاط أبعاد التعاطف على مستوى النبرة العامة وعلى مستوى الانفعالات المحددة في آن واحد

وأضاف الإطار مكونًا دلاليًا قائمًا على إطار راغاس يقيم الصلة السياقية للاستجابة وتماسكها مع استفسار المستخدم، بحيث لا يقاس التعاطف بمعزل عن جودة المضمون وارتباطه بالسؤال، ثم اختبرت الدراسة الإطار تجريبيًا للتحقق من قدرته على التقاط شدة التعاطف وفروقه الدقيقة في الاستجابات المولدة من النماذج اللغوية، ومن تمييز الاستجابات المتعاطفة فعلًا من الاستجابات المحايدة أو السطحية

ثانيًا: أبرز النتائج

1. أظهرت النتائج التجريبية أن المقياس المقترح يلتقط بفعالية شدة التعاطف وفروقه الدقيقة في الاستجابات المولدة من النماذج اللغوية، إذ ميز بين مستويات المواءمة الوجدانية والانفعالية بدقة تتجاوز الانطباع العام عن الاستجابة، بما يثبت صلاحية الإطار أداة قياس قابلة للاستخدام المقارن بين النماذج

2. بين الإطار أن الجمع بين مكون المشاعر ومكون الانفعال الدقيق والمكون الدلالي السياقي يوفر صورة مركبة متوازنة للتعاطف، فلا تنحصر جودة الاستجابة في نبرتها العاطفية وحدها، بل تشمل توافق انفعالاتها التفصيلية مع حالة المستخدم وصلة مضمونها بسياق حديثه وتماسكها الداخلي

3. وفر الإطار المقترح أساسًا متينًا لتطوير ذكاء اصطناعي حواري ذكي وجدانيًا، إذ يمنح الباحثين والمطورين وسيلة موحدة لتوصيف أداء النماذج في البعد التعاطفي توصيفًا كميًا، بدل الاعتماد على أمثلة منتقاة أو انطباعات مستخدمين متفرقة، وهو ما يمهد لمقارنات منهجية عادلة بين النماذج المتعاقبة وقياس أثر تحسينات التدريب في جودة الاستجابة الوجدانية قياسًا متكررًا قابلًا للتحقق

ثالثًا: دلالات الدراسة وتطبيقاتها

يوفر هذا الإطار أساسًا متينًا لتطوير ذكاء اصطناعي حواري ذكي وجدانيًا، إذ يمنح مطوري النماذج أداة موضوعية لتقييم تقدم نماذجهم في البعد التعاطفي والمقارنة بين البدائل واختيار الأنسب لتطبيقات حساسة مثل الدعم النفسي الأولي وخدمة العملاء والتعليم الفردي، كما يساعد الجهات المقيمة على وضع معايير اعتماد أوضح للأنظمة التي تتعامل مع مستخدمين في حالات وجدانية هشة، ويستفيد الباحثون العرب وطلاب الدراسات العليا في التفاعل بين الإنسان والحاسوب من هذا العمل في اتجاهين، أولهما تكييف أطر التقييم الوجداني مع اللغة العربية وخصوصيات التعبير الانفعالي فيها، وثانيهما الانتباه إلى أن مقاييس التعاطف الآلي لا تغني عن الإشراف البشري في التطبيقات النفسية الحساسة، بل تساند تصميمها وضبط جودتها ضمن أطر أخلاقية ومهنية واضحة

وخلاصة القول إن الدراسة قدمت إطار تقييم مركبًا يقيس تعاطف النماذج اللغوية الكبيرة على مستويات المشاعر والانفعال والدلالة السياقية، وأثبتت فعاليته تجريبيًا، بما يضع أساسًا قياسيًا طال غيابه لتطوير أنظمة حوارية أكثر ذكاء وجدانيًا وقابلية للتحقق الموضوعي