تحسين تقسيم أورام الدماغ في التصوير الطبي باستخدام تجميع سياقي متعدد المقاييس متعدد الأنماط ودمج الانتباه
Enhanced brain tumor segmentation in medical imaging using multi-modal multi-scale contextual aggregation and attention fusion

شارك:
المجلة: Scientific Reports، المجلد: 15، العدد: 1
DOI: https://doi.org/10.1038/s41598-025-21255-4
PMID: https://pubmed.ncbi.nlm.nih.gov/41136620
تاريخ النشر: 2025-10-24
المؤلف: Waqar Aslam وآخرون
الموضوع الرئيسي: كشف وتصنيف أورام الدماغ

نظرة عامة

تقدم ورقة البحث إطارًا جديدًا يسمى التجميع السياقي متعدد المقاييس متعدد الأنماط مع دمج الانتباه (MM-MSCA-AF) يهدف إلى تحسين تقسيم أورام الدماغ من مسحات الرنين المغناطيسي متعددة الأنماط، وهو أمر أساسي للتشخيص الفعال وتخطيط العلاج. يتناول الإطار التحديات التي تطرحها تباين الأورام وتنوع تسلسلات الرنين المغناطيسي من خلال استخدام التجميع السياقي متعدد المقاييس لالتقاط كل من الميزات المكانية العالمية والدقيقة، إلى جانب دمج الانتباه المقيد لتحسين تمثيلات الميزات مع تقليل الضوضاء. تم تقييم MM-MSCA-AF على مجموعة بيانات BRATS 2020، حيث حقق درجة Dice تبلغ 0.8158 لمناطق الأورام النخرية و0.8589 بشكل عام، متفوقًا على النماذج الحالية مثل U-Net وAttention U-Net.

في الختام، يظهر نموذج MM-MSCA-AF تقدمًا كبيرًا في تقسيم مناطق الأورام المختلفة بدقة، بما في ذلك المناطق النخرية، والمناطق المعززة، ومناطق الوذمة. أداؤه المتفوق، كما تشير إليه المقاييس الرئيسية مثل متوسط التقاطع على الاتحاد ودرجة Dice، يبرز فعاليته في إدارة تعقيد الأورام وتحديد الحدود. يسمح دمج استخراج الميزات متعدد المقاييس الهرمي للنموذج بالاستفادة من كل من السياق العالمي والتفاصيل عالية الدقة، بينما تعزز تقنية دمج الانتباه المقيد الميزات ذات الصلة بالأورام. علاوة على ذلك، يحافظ النموذج على الكفاءة الحسابية، مما يجعله مناسبًا للتطبيقات السريرية في الوقت الحقيقي. ستستكشف الأعمال المستقبلية دمج طرق التعلم الذاتي والإشراف القليل لتعزيز قدرات التعميم في البيئات الطبية ذات الموارد المحدودة.

الطرق

توضح قسم المنهجية هيكل نموذج MM-MSCA-AF، الذي يهدف إلى تعزيز تقسيم أورام الدماغ من خلال دمج مدخلات الرنين المغناطيسي متعددة الأنماط، واستخراج الميزات متعددة المقاييس، وتحسين الميزات المعتمد على الانتباه. تشمل المكونات الرئيسية للنموذج معالجة المدخلات متعددة الأنماط، وآلية الانتباه السياقي متعدد المقاييس (MSCA)، ودمج الانتباه العالمي (GAF)، واستراتيجية فك التشفير، وكلها تساهم في تحسين دقة التقسيم.

بالإضافة إلى ذلك، يتم وصف الإعداد التجريبي، الذي يشمل خصائص مجموعة البيانات المستخدمة، وخطوات المعالجة المسبقة المتخذة، والبيئة الحسابية التي أجريت فيها التجارب. كما يتناول اختيار المعلمات الفائقة، وتقنيات التعامل مع البيانات، ومقاييس التقييم المستخدمة لقياس أداء النموذج، مما يضمن تقييمًا شاملاً لفعاليته في مهام تقسيم أورام الدماغ.

النتائج

تظهر نتائج الدراسة أن نموذج MM-MSCA-AF يتفوق على عدة نماذج تقسيم متطورة، بما في ذلك HCA وnnU-Net وUNet++ وSegNet وAttention U-Net، عند تقييمه على مجموعة بيانات BRATS 2020. تم استخدام مقاييس الأداء مثل خسارة الانتروبيا المتقاطعة الفئوية، والدقة، ومتوسط التقاطع على الاتحاد (Mean IoU)، ودرجة Dice، والدقة، والحساسية، والنوعية للمقارنة. من الجدير بالذكر أن MM-MSCA-AF حقق متوسط IoU قدره 0.8589 ودرجة Dice قدرها 0.8158، مع درجة Dice قدرها 0.7982 تحديدًا لمناطق الأورام النخرية، مما يشير إلى دقة تقسيم متفوقة عبر مناطق الأورام المختلفة.

تسلط النتائج الضوء على أن MM-MSCA-AF يظهر دقة وحساسية ونوعية أعلى مقارنة بـ nnU-Net وAttention U-Net، خاصة في تحديد حواف الأورام والمناطق الفرعية. يُعزى هذا الأداء المحسن إلى آليات التجميع السياقي متعدد المقاييس ودمج الانتباه المقيد للنموذج، والتي تلتقط بفعالية كل من الميزات العالمية والدقيقة للأورام. بشكل عام، تؤكد النتائج قدرة النموذج على تجاوز الهياكل الحالية في مهام تقسيم الأورام المعقدة، كما هو موضح في الأشكال والجداول المرفقة.

المناقشة

تسلط قسم المناقشة في ورقة البحث الضوء على تطور تقنيات تقسيم أورام الدماغ، مما يقارن بين الطرق التقليدية وطرق التعلم العميق المعاصرة. اعتمدت تقنيات التقسيم المبكرة بشكل أساسي على طرق العتبة، مثل عتبة أوتسو، والتي، على الرغم من كفاءتها الحسابية، واجهت صعوبات مع تباين الأورام وعيوب الرنين المغناطيسي. حاولت الطرق المعتمدة على المناطق، بما في ذلك نمو المناطق وتقسيم المياه، معالجة هذه القيود لكنها كانت لا تزال غير كافية لمهام التصوير الطبي المعقدة. أدت إدخال خوارزميات التعلم الآلي التقليدية، مثل آلات الدعم الناقل (SVMs) والغابات العشوائية (RFs)، إلى تحسين أداء التقسيم ولكنها كانت تتطلب هندسة ميزات واسعة وواجهت تحديات في التعميم عبر مجموعات بيانات متنوعة.

في المقابل، أظهرت هياكل التعلم العميق، وخاصة الشبكات العصبية التلافيفية (CNNs) مثل U-Net ومتغيراتها، وعدًا كبيرًا في تقسيم الصور الطبية. ومع ذلك، غالبًا ما تكافح هذه النماذج مع مناطق الأورام الصغيرة وضوضاء الخلفية بسبب نقص آليات الانتباه الصريحة. يهدف نموذج MM-MSCA-AF المقترح إلى التغلب على هذه القيود من خلال دمج إشارات الرنين المغناطيسي متعددة الأنماط واستخدام آلية دمج الانتباه المقيد (GAF) لتعزيز الميزات ذات الصلة بالأورام مع قمع المعلومات الخلفية غير ذات الصلة. يظهر هذا النموذج دقة تقسيم متفوقة، حيث حقق درجة Dice قدرها 0.8589 على مجموعة بيانات BRATS 2020، متجاوزًا بذلك التقنيات الحالية المتطورة. تؤكد المناقشة على الحاجة إلى نماذج متقدمة يمكنها التقاط كل من الميزات العالمية والدقيقة للأورام بفعالية، مما يبرز المساهمات الابتكارية لـ MM-MSCA-AF في معالجة تحديات تقسيم أورام الدماغ.

القيود

تناقش قسم القيود أوجه القصور في نماذج التعلم العميق المختلفة في تقسيم الصور الطبية، خاصة في سياق اكتشاف الأورام. بينما يعزز Attention U-Net التقسيم من خلال دمج بوابات الانتباه (AGs) للتركيز على ميزات الأورام المهمة، فإنه يعاني من تكاليف حسابية عالية وقد لا يزال يخطئ في تحديد المناطق عالية الكثافة كأورام، مما يؤدي إلى إيجابيات خاطئة. في المقابل، يقدم نموذج MM-MSCA-AF المقترح إطار عمل انتباه عام (GAF) جديد يقوم بضبط أوزان الانتباه ديناميكيًا عبر أنماط الرنين المغناطيسي المختلفة والمقاييس المكانية، مما يحسن اختيار الميزات ويقلل من الإيجابيات الخاطئة مع الحفاظ على الكفاءة الحسابية.

تسلط التحليل المقارن الضوء على قيود محددة للنماذج الحالية، مثل صعوبة U-Net في دمج الرنين المغناطيسي متعدد الأنماط وعدم كفاية nnU-Net في التعامل مع الميزات متعددة المقاييس. يتناول MM-MSCA-AF هذه القضايا من خلال دمج دمج الرنين المغناطيسي متعدد الأنماط واستخدام الانتباه السياقي متعدد المقاييس (MSCA) لتحسين تجميع الميزات. بالإضافة إلى ذلك، يتفوق على نماذج مثل SegNet وTransBTS من خلال توفير دقة تقسيم محسنة مع متطلبات حسابية أقل. بشكل عام، يظهر MM-MSCA-AF تقدمًا كبيرًا على النماذج التقليدية من خلال تحسين آليات الانتباه وتحسين الكفاءة الحسابية، كما هو ملخص في الجدول 4.

Journal: Scientific Reports, Volume: 15, Issue: 1
DOI: https://doi.org/10.1038/s41598-025-21255-4
PMID: https://pubmed.ncbi.nlm.nih.gov/41136620
Publication Date: 2025-10-24
Author(s): Waqar Aslam et al.
Primary Topic: Brain Tumor Detection and Classification

Overview

The research paper presents a novel framework called Multi-Modal Multi-Scale Contextual Aggregation with Attention Fusion (MM-MSCA-AF) aimed at improving the segmentation of brain tumors from multi-modal MRI scans, which is essential for effective diagnosis and treatment planning. The framework addresses challenges posed by tumor heterogeneity and variability in MRI sequences by employing multi-scale contextual aggregation to capture both global and fine-grained spatial features, alongside gated attention fusion to refine feature representations while minimizing noise. Evaluated on the BRATS 2020 dataset, MM-MSCA-AF achieved a Dice score of 0.8158 for necrotic tumor regions and 0.8589 overall, outperforming existing models such as U-Net and Attention U-Net.

In conclusion, the MM-MSCA-AF model demonstrates significant advancements in accurately segmenting various tumor sub-regions, including necrotic, enhancing, and edema areas. Its superior performance, as indicated by key metrics like Mean Intersection over Union and Dice score, highlights its effectiveness in managing tumor complexity and boundary delineation. The integration of hierarchical multi-scale feature extraction allows the model to leverage both global context and high-resolution details, while the gated attention fusion technique enhances relevant tumor features. Furthermore, the model maintains computational efficiency, making it suitable for real-time clinical applications. Future work will explore the incorporation of self-supervised and few-shot learning methods to enhance generalization capabilities in low-resource medical settings.

Methods

The methodology section outlines the architecture of the MM-MSCA-AF model, which aims to enhance brain tumor segmentation through the integration of multi-modal MRI inputs, multi-scale feature extraction, and attention-based feature refinement. Key components of the model include the processing of multi-modal inputs, the Multi-Scale Contextual Attention (MSCA) mechanism, the Global Attention Fusion (GAF), and the decoding strategy, all of which contribute to improved segmentation accuracy.

Additionally, the experimental setup is described, encompassing the characteristics of the dataset utilized, the preprocessing steps undertaken, and the computational environment in which the experiments were conducted. It also details the selection of hyperparameters, data handling techniques, and the evaluation metrics employed to measure the model’s performance, ensuring a comprehensive assessment of its efficacy in brain tumor segmentation tasks.

Results

The results of the study demonstrate that the MM-MSCA-AF model outperforms several state-of-the-art segmentation models, including HCA, nnU-Net, UNet++, SegNet, and Attention U-Net, when evaluated on the BRATS 2020 dataset. Performance metrics such as categorical cross-entropy loss, accuracy, Mean Intersection over Union (Mean IoU), Dice score, precision, sensitivity, and specificity were utilized for comparison. Notably, MM-MSCA-AF achieved a Mean IoU of 0.8589 and a Dice score of 0.8158, with a Dice score of 0.7982 specifically for necrotic tumor regions, indicating superior segmentation accuracy across various tumor regions.

The findings highlight that MM-MSCA-AF exhibits higher precision, sensitivity, and specificity compared to nnU-Net and Attention U-Net, particularly in delineating tumor edges and subregions. This enhanced performance is attributed to the model’s multi-scale contextual aggregation and gated attention fusion mechanisms, which effectively capture both global and fine-grained tumor features. Overall, the results underscore the model’s capability to surpass existing architectures in complex tumor segmentation tasks, as illustrated in the accompanying figures and tables.

Discussion

The discussion section of the research paper highlights the evolution of brain tumor segmentation techniques, contrasting traditional methods with contemporary deep learning approaches. Early segmentation techniques primarily relied on thresholding methods, such as Otsu’s thresholding, which, while computationally efficient, struggled with tumor heterogeneity and MRI artifacts. Region-based methods, including region growing and watershed segmentation, attempted to address these limitations but were still inadequate for complex medical imaging tasks. The introduction of classical machine learning algorithms, such as Support Vector Machines (SVMs) and Random Forests (RFs), improved segmentation performance but required extensive feature engineering and faced challenges in generalization across diverse datasets.

In contrast, deep learning architectures, particularly convolutional neural networks (CNNs) like U-Net and its variants, have shown significant promise in medical image segmentation. However, these models often struggle with small tumor regions and background noise due to their lack of explicit attention mechanisms. The proposed MM-MSCA-AF model aims to overcome these limitations by integrating multi-modal MRI signals and employing a Gated Attention Fusion (GAF) mechanism to enhance tumor-relevant features while suppressing irrelevant background information. This model demonstrates superior segmentation accuracy, achieving a Dice score of 0.8589 on the BRATS 2020 dataset, thereby surpassing existing state-of-the-art techniques. The discussion emphasizes the need for advanced models that can effectively capture both global and fine-grained tumor features, highlighting the innovative contributions of MM-MSCA-AF in addressing the challenges of brain tumor segmentation.

Limitations

The section on limitations discusses the shortcomings of various deep learning models in medical imaging segmentation, particularly in the context of tumor detection. While the Attention U-Net enhances segmentation by incorporating attention gates (AGs) to focus on significant tumor features, it suffers from high computational costs and may still misidentify high-intensity areas as tumors, resulting in false positives. In contrast, the proposed MM-MSCA-AF model introduces a novel Generalized Attention Framework (GAF) that dynamically adjusts attention weights across different MRI modalities and spatial scales, improving feature selection and reducing false positives while maintaining computational efficiency.

The comparative analysis highlights specific limitations of existing models, such as U-Net’s struggle with multi-modal MRI fusion and nnU-Net’s inadequate handling of multi-scale features. MM-MSCA-AF addresses these issues by integrating multi-modal MRI fusion and employing Multi-Scale Contextual Attention (MSCA) for enhanced feature aggregation. Additionally, it outperforms models like SegNet and TransBTS by providing improved segmentation accuracy with lower computational demands. Overall, MM-MSCA-AF demonstrates significant advancements over traditional models by refining attention mechanisms and optimizing computational efficiency, as summarized in Table 4.

شارك: