أحدثت النماذج اللغوية الكبيرة تحولًا واسعًا في كيفية الوصول إلى المعرفة الطبية وتحليلها، غير أن الأسئلة المتخصصة الدقيقة في فروع طبية ضيقة كجراحة الصدر تتطلب دمج علاقات سريرية متعددة العوامل داخل النصوص، وهو ما قد تعجز عنه النماذج العامة التي لم تُبنَ على معرفة تخصصية موثقة، فتأتي إجاباتها أقل دقة مما تتطلبه القرارات الطبية الحساسة
ومن هنا تتجه الأنظار إلى تزويد هذه النماذج بقواعد معرفة محلية مستمدة من كتب طبية محررة بعناية، بغية رفع قدرتها على الاستدلال المتخصص، وتكتسب هذه القضية أهمية خاصة في التعليم الطبي والاختبارات المهنية، إذ يمكن لقياس أداء النماذج على أسئلة امتحانية تخصصية أن يكشف حدودها الحقيقية قبل أي توظيف سريري محتمل
وتزداد أهمية هذا التوجه مع اتساع توظيف النماذج اللغوية في البيئات التعليمية والسريرية، إذ يمكن للمقارنات المنهجية بين النماذج المعززة بالمعرفة والنماذج العامة والأطباء والمهندسين أن ترسم خريطة واقعية لقدرات كل طرف، وتمنع المبالغة في تقدير ما تستطيع هذه الأنظمة إنجازه في المجالات الدقيقة التي تتطلب خبرة تراكمية طويلة وتدريبًا سريريًا مكثفًا، وتتسق هذه النزعة مع توجه عام في أبحاث الذكاء الاصطناعي الطبي نحو التخصص المعرفي بدل الاعتماد على القدرات العامة وحدها
أولًا: أهداف الدراسة ومنهجيتها
هدفت الدراسة إلى بناء وكيل نموذج لغوي معزز بالمعرفة يعرف بدي كيه إل إل إم، عبر تضمين معرفة منقحة من الكتب الطبية الدراسية داخل إطار عمل قائم على منصة لانغ تشين، لدعم الاستدلال المتخصص في جراحة الصدر وتحسين الأداء على الأسئلة الامتحانية المتخصصة
واختبر الباحثون النموذج على مجموعة أسئلة امتحانية في جراحة الصدر تضم 56 سؤالًا، في بيئة نصية مقيدة دون تصفح للإنترنت أو أدوات خارجية، وقارنوا أداءه بنماذج لغوية عامة وبثلاثة جراحي صدر وثلاثة مهندسين من غير الخبراء الطبيين، مع تحليل درجات الاختبار وأنماط الأخطاء وتحليل إزالة المكونات لقياس أثر قاعدة المعرفة المحلية
ثانيًا: أبرز النتائج
كشفت نتائج المقارنة عن صورة متدرجة للأداء بين النموذج المعزز والبدائل الأخرى، وتتلخص أبرز النتائج في النقاط الآتية
1، أظهر النموذج المعزز بالمعرفة المحلية تفوقًا في درجة الاختبار بلغ 11.8 نقطة مقارنة بالنسخة المجردة من قاعدة المعرفة المحلية
2، تفوقت الوكلاء القائمة على النماذج اللغوية التجارية على النماذج مفتوحة المصدر وعلى المشاركين غير الخبراء في هذه المجموعة من الأسئلة
3، حقق جراحو الصدر ذوو الخبرة أعلى الدرجات إجمالًا، متفوقين على جميع النماذج والوكلاء المختبرة
4، أكد تحليل الإزالة أن حذف قاعدة المعرفة المحلية خفض درجة الاختبار بمقدار 11.8 نقطة مئوية، مما يبرز الدور المباشر للمعرفة المتخصصة المضمنة في رفع الأداء
ثالثًا: دلالات الدراسة وتطبيقاتها
تحمل الدراسة دلالة عملية للتعليم الطبي وتطوير مساعدات القرار، إذ تبين أن تزويد النماذج اللغوية بمعرفة تخصصية موثقة قد يحسن أداءها في الأسئلة الامتحانية الضيقة، بما يدعم توظيفها أدوات مساندة في التدريب والمراجعة واختبارات الكفاءة، مع بقاء الخبرة البشرية المتخصصة هي المرجع الأعلى في الأداء
وينبه الباحثون العرب وطلاب الدراسات العليا في المعلوماتية الصحية إلى تحفظ جوهري أقرته الدراسة، فتقييم 56 سؤالًا نصيًا لا يثبت تكافؤًا سريريًا ولا دقة تشخيصية في الممارسة الفعلية ولا كفاءة متعددة الوسائط ولا جاهزية لدعم القرار السريري في الواقع، مما يستدعي تقييمات أوسع ومتعددة المراكز قبل أي اعتماد عملي
كما تبرز الدراسة قيمة تحليل أنماط الأخطاء إلى جانب الدرجات الإجمالية، إذ يكشف توزيع الأخطاء عن مواضع الضعف المعرفي لدى النماذج ويساعد مطوري المناهج وقواعد المعرفة على توجيه التحسين إلى الموضوعات الأكثر إشكالًا، وهو درس منهجي يفيد الباحثين في تصميم تقييمات أعمق للنماذج الطبية تتجاوز الدرجة النهائية إلى فهم طبيعة القصور وحدوده
وخلاصة القول إن تضمين المعرفة الطبية المتخصصة في النماذج اللغوية الكبيرة يمثل اتجاهًا واعدًا لتحسين أدائها في المجالات الضيقة، شريطة أن يظل هذا التوظيف خاضعًا لتقييم صارم ومتدرج يراعي الفارق بين النجاح الامتحاني النصي ومتطلبات الممارسة السريرية الحقيقية
