إطار تعلم عميق قائم على الخرائط الحرارية لمواءمة الصور متعددة الأنماط المرئية وتحت الحمراء القريبة والحرارية في التصوير الجلدي

توظف مواءمة الصور متعددة الأنماط المعلومات التكاملية المستمدة من مصادر تصوير متنوعة لتحقيق محاذاة مكانية دقيقة بين الصور، وهي خطوة أساسية تسبق دمج البيانات وتحليلها في تطبيقات طبية وهندسية كثيرة، غير أن مواءمة أنماط الضوء المرئي والأشعة تحت الحمراء القريبة والتصوير الحراري ما تزال مهمة صعبة، بسبب الفروق الكبيرة في مظهر الصورة بين هذه الأنماط وتباين ما تلتقطه من خصائص للأنسجة، وبسبب محدودية مجموعات البيانات المشروحة المتاحة لتدريب النماذج وتقييمها

وتبرز أهمية هذه المواءمة في التصوير الجلدي على وجه الخصوص، إذ يمكن أن تقدم الأنماط الثلاثة مجتمعة صورة أغنى عن الآفات الجلدية مما يقدمه كل نمط على حدة، فالنمط المرئي يوثق المظهر السطحي، وتحت الحمراء القريبة يكشف بنى أعمق، والحراري يلتقط التوقيع الحراري للأنسجة، ومتى تحققت محاذاتها بدقة أمكنت المقارنة الموضعية الدقيقة بينها، وقد اتجهت هذه الدراسة إلى بناء إطار تعلم عميق يحقق مواءمة مشتركة لهذه الأنماط الثلاثة، مؤسسة أول مجموعة بيانات موثقة من نوعها لهذا الغرض

وتعد مواءمة الصور خطوة تأسيسية في أي تحليل متعدد الأنماط، إذ لا معنى لمقارنة قياسات مكانية بين صورتين غير متحاذيتين، وتزداد الصعوبة كلما تباعدت الأنماط في خصائصها الفيزيائية، فالصورة الحرارية مثلًا ترسم توزيع درجات الحرارة لا المعالم البنيوية، ما يجعل مطابقتها مع الصورة المرئية تحديًا خوارزميًا قائمًا بذاته، وقد فتح التعلم العميق آفاقًا جديدة لمعالجته عبر تعلم تمثيلات مشتركة بين الأنماط

أولًا: أهداف الدراسة ومنهجيتها

اقترحت الدراسة إطارًا مستوحى من شبكة ريز يو نت يجمع بين التنبؤ بالخرائط الحرارية وتقدير الهوموغرافيا، بما يمكّن المواءمة المشتركة بين نمطي الأشعة تحت الحمراء القريبة والحرارية عبر تمثيلات سمات مشتركة، وأنشأ الباحثون مجموعة بيانات خاصة تضم مئة وخمسًا وخمسين ثلاثية من صور الآفات الجلدية بالأنماط الثلاثة، مأخوذة من اثنين وستين مريضًا بما مجموعه أربع مئة وخمس وستون صورة، وقد أكدت التشخيصات من قبل أطباء الجلدية أو بالفحص النسيجي المرضي، وتوزعت الآفات على الوجه والجذع والأطراف لتقييم متانة المواءمة في ظل التباين المكاني

ثانيًا: أبرز النتائج

1. أظهرت التجارب أن مواءمة نمط الأشعة تحت الحمراء القريبة مع النمط المرئي تفوقت باستمرار على مواءمة النمط الحراري مع النمط المرئي

2. يعكس هذا التفوق ما يتمتع به نمط الأشعة تحت الحمراء القريبة من محتوى بنيوي أغنى وتشابه طيفي أعلى مع النمط المرئي، بما يجعل مطابقتهما أسهل وأدق

3. على الرغم من القيود المتصلة بحجم مجموعة البيانات وتباين ظروف الالتقاط، أظهر الإطار جدوى مواءمة ثلاثيات الأنماط المرئية وتحت الحمراء القريبة والحرارية، وقدم أول مجموعة بيانات موثقة من نوعها لتصوير الآفات الجلدية متعدد الأنماط

ثالثًا: دلالات الدراسة وتطبيقاتها

تؤسس هذه الدراسة مرجعًا بياناتيًا ومنهجيًا لأبحاث لاحقة في مواءمة الصور الطبية متعددة الأنماط، إذ تفتح مجموعة البيانات الأولى من نوعها الباب أمام مقارنة الخوارزميات المستقبلية على أساس مشترك، بينما يشير تفوق مواءمة تحت الحمراء القريبة إلى أولويات عملية عند تصميم أنظمة التصوير الجلدي متعددة الأنماط، وتبقى توسعة مجموعة البيانات وتقليل تباين الالتقاط مهمتين أساسيتين لرفع دقة المواءمة وقابليتها للتعميم في الدراسات المقبلة

ومن الدلالات المنهجية للدراسة أن التقدم في هذا الحقل لا يتحقق بالخوارزميات وحدها، بل بتوافر مجموعات بيانات موثقة ومشروحة تسمح بالتدريب والمقارنة العادلة، وهي نقطة ضعف مزمنة في بحوث التصوير الطبي متعدد الأنماط، ولذلك يمثل إتاحة مجموعة بيانات ثلاثية موثقة إسهامًا قد يتجاوز أثره إطار المواءمة المقترح ذاته، إذ يمكن أن يعتمدها باحثون آخرون معيارًا للمقارنة وتطويرًا لحلول أدق

وخلاصة القول إن الجمع بين الخرائط الحرارية وتقدير الهوموغرافيا ضمن إطار تعلم عميق واحد قدم خطوة قابلة للبناء عليها نحو مواءمة دقيقة لثلاثة أنماط تصويرية متباينة، وإن تطبيقات الذكاء الاصطناعي في التصوير الطبي تتقدم بأمثال هذه الأطر والمجموعات البيانية الموثقة التي تنهض بها فرق بحثية تجمع بين الطب والهندسة