تقييم فعالية النماذج اللغوية الكبيرة في تثقيف مرضى أورام القلب: مقارنة بين الدقة وسهولة القراءة واستراتيجيات التوجيه

يحمل اندماج النماذج اللغوية الكبيرة في تثقيف مرضى أورام القلب وعدا بسد فجوة حرجة في المعلومات المتاحة والميسرة والدقيقة والملائمة للمرضى، غير أن أداء النماذج المتاحة للعموم في هذا المجال المتخصص ما يزال غير مستكشف بدرجة كافية، مما يجعل تقييمها ضرورة قبل الاعتماد عليها

تأتي هذه الدراسة لتقييم أداء ثلاثة نماذج لغوية كبيرة بوصفها مساعدات للأطباء في تثقيف مرضى أورام القلب، ولفحص أثر هندسة التوجيه في جودة الاستجابات، وهي مسألة عملية مهمة، فطريقة صياغة السؤال قد تغير جودة الإجابة تغيرا جوهريا، وفهم هذا الأثر يمنح الأطباء والمرضى إرشادات عملية لاستخدام هذه الأدوات بأمان وفعالية أكبر

أولًا: أهداف الدراسة ومنهجيتها

هدفت الدراسة إلى تقييم أداء ثلاثة نماذج لغوية كبيرة هي تشات جي بي تي فور وكيمي ودوباو بوصفها مساعدات للأطباء في تثقيف مرضى أورام القلب، وفحص أثر هندسة التوجيه في جودة الاستجابات، وقد طُرحت عشرون سؤالا معياريا تغطي موضوعات أورام القلب مرتين على النماذج الثلاثة، مرة دون توجيه ومرة مع توجيه يقضي بتبسيط اللغة، مما أنتج 240 استجابة، وقيّم أربعة أخصائيين في أورام القلب هذه الاستجابات من حيث الدقة والشمولية والفائدة والعملية، كما قُيمت سهولة القراءة والتعقيد باستخدام إطار لتحليل النصوص الصينية

يمنح هذا التصميم المنهجي الدراسة قدرة على عزل أثرين مهمين، هما أثر اختلاف النماذج وأثر التوجيه، فطرح الأسئلة نفسها مرتين يتيح مقارنة عادلة بين الحالتين، بينما يضيف تقييم الأخصائيين بعدا سريريا لا يلتقطه القياس الآلي وحده، وهو ما يجعل النتائج قابلة للتوظيف في إرشادات عملية لاستخدام النماذج اللغوية في التثقيف الصحي

ثانيًا: أبرز النتائج

1، أظهرت النتائج أن 63.3 في المئة من الاستجابات البالغ عددها 240 استجابة قُيمت بأنها صحيحة، بينما قُيمت 35.0 في المئة بأنها صحيحة جزئيا، و1.7 في المئة فقط بأنها غير صحيحة، مما يشير إلى أن النماذج المتاحة للعموم تقدم إجابات دقيقة في معظمها في مجال أورام القلب، مع هامش خطأ صغير لكنه غير مهمل في سياق طبي حساس

2، لم تظهر فروق دالة إحصائيا في الدقة بين النماذج، إذ بلغت قيمة الدلالة 0.26، كما لم يقدم نموذج كيمي أي استجابات غير صحيحة، وهو ما يعني أن النماذج الثلاثة متقاربة في دقتها العامة رغم اختلاف بنيتها، وأن اختيار النموذج وحده لا يضمن جودة أعلى، بل تتدخل عوامل أخرى مثل صياغة التوجيه وطبيعة السؤال

3، حدث تراجع دال إحصائيا في الشمولية عند مستوى دلالة 0.03 وفي الفائدة عند مستوى دلالة أدنى من 0.01 بعد التوجيه، وبصورة خاصة لدى نموذج دوباو الذي تراجعت دقته من 57.5 في المئة إلى 7.5 في المئة عند مستوى دلالة أدنى من 0.01، وهو ما يكشف عن مفارقة مهمة، فتبسيط اللغة قد يحسن سهولة القراءة لكنه قد يقوض الشمولية والفائدة السريرية بصورة حادة

4، أظهرت مقاييس سهولة القراءة عدم وجود فروق بين النماذج في عمر القراءة ودرجة الصعوبة وعدد الكلمات الإجمالي وطول الجملة، غير أن التوجيه خفض التعقيد، فانخفض عمر القراءة لدى نموذج دوباو من 12.9 عاما بانحراف معياري 0.8 إلى 10.1 عاما بانحراف معياري 1.2 عند مستوى دلالة أدنى من 0.01، مما يؤكد أن التوجيه يحقق هدفه اللغوي لكن بثمن سريري محتمل

ثالثًا: دلالات الدراسة وتطبيقاتها

تتجلى الدلالة العملية للدراسة في أنها تحذر من الاعتماد غير النقدي على النماذج اللغوية في التثقيف الصحي، فالدقة العامة المرتفعة لا تعني صلاحية كل استجابة، وتبسيط اللغة سلاح ذو حدين، إذ يحسن الفهم لكنه قد يحذف تفاصيل سريرية مهمة، وهو ما يدعو الأطباء إلى مراجعة استجابات النماذج قبل تقديمها للمرضى، وإلى صياغة توجيهات متوازنة تحافظ على الدقة مع تحسين الوضوح

على مستوى البحث العلمي تسهم الدراسة في إثراء الأدبيات حول الذكاء الاصطناعي في الطب، إذ تقدم تقييما تجريبيا في مجال متخصص، وتدعو إلى تطوير ضبط دقيق متخصص وأطر تقييم متخصصة لتحسين النماذج اللغوية في تثقيف المرضى، وإلى دراسات تختبر استراتيجيات توجيه أكثر تطورا تحافظ على الشمولية مع تبسيط اللغة

وخلاصة القول إن الدراسة تؤكد أن النماذج اللغوية المتاحة للعموم تقدم إجابات دقيقة في معظمها في أورام القلب، لكن فائدتها مقيدة بعدم اتساق الشمولية وحساسية جودتها لتصميم التوجيه، مما يجعل الإشراف البشري والتقييم المتخصص ضرورة لا غنى عنها