تخصيص SAM-Med3D مع محول متعدد الرؤى وميزات عدم تطابق T2-FLAIR لتحديد وتصنيف جين IDH في الأورام الدبقية Customized SAM-Med3D with multi-view adapter and T2-FLAIR mismatch features for glioma IDH genotyping and grading

شارك:
المجلة: Frontiers in Behavioral Neuroscience، المجلد: 19
DOI: https://doi.org/10.3389/fnbeh.2025.1705385
PMID: https://pubmed.ncbi.nlm.nih.gov/41602776
تاريخ النشر: 2026-01-12
المؤلف: Xinyu Li وآخرون
الموضوع الرئيسي: كشف وتصنيف أورام الدماغ

نظرة عامة

تقدم البحث شبكة متعددة المهام جديدة، MTSAM، مصممة للتصنيف الجيني والتقييم المتزامن للأورام الدبقية، وهي أورام دماغية عدوانية ذات معدلات بقاء ضعيفة. تتضمن الطرق التقليدية لتحديد تصنيف الورم وحالة إنزيم إيزوسيتريت ديهيدروجيناز (IDH) غالبًا خزعات جراحية. بالمقابل، تستخدم MTSAM تقنيات التصوير بالرنين المغناطيسي متعددة الأنماط غير الغازية، مستفيدة بشكل خاص من إشارات عدم تطابق T2-FLAIR، لاستخراج معلومات مكانية حاسمة عن الورم وخصائص الميكروبيئة. تستخدم الشبكة عمليات الالتفاف المتوسعة لتعزيز تحليل الصور وتدمج الميزات من صور T2 وFLAIR، مما يؤدي في النهاية إلى تحسين نموذج SAM-Med3D المخصص لزيادة دقة التشخيص.

تشير النتائج إلى أن MTSAM تحقق درجات مثيرة للإعجاب في المنطقة تحت المنحنى (AUC) بنسبة 92.38% و94.31% لتصنيف IDH والتقييم، على التوالي، على مجموعة بيانات UCSF-PDGM، و91.56% و93.37% على مجموعة بيانات BraTS2020، متفوقة على المنهجيات الحالية. يدعم استخدام تصور Grad-CAM فعالية النموذج من خلال تسليط الضوء على قدرته على التركيز على المناطق داخل الأورام الدبقية التي توفر معلومات تنبؤية هامة. يبرز هذه الدراسة إمكانيات دمج بيانات التصوير غير الغازية متعددة المناظر مع نماذج الصور الطبية المتقدمة لتعزيز تشخيص الأورام الدبقية وتقدم البحث في هذا المجال الحرج.

مقدمة

تناقش مقدمة ورقة البحث الأورام الدبقية، وهي أكثر الأورام الدماغية الأولية الخبيثة شيوعًا لدى البالغين، والتي تتميز بمعدل بقاء ضعيف لمدة خمس سنوات. يتم تحديد استراتيجيات العلاج، بما في ذلك الاستئصال الجراحي والعلاج المستهدف، إلى حد كبير من خلال تصنيف الورم وحالة إنزيم إيزوسيتريت ديهيدروجيناز (IDH). تصنف منظمة الصحة العالمية الأورام الدبقية المنتشرة لدى البالغين إلى درجات 2-4، حيث تظهر الأورام الدبقية الجليوبلاستومية من نوع IDH البري أعلى معدل حدوث. ومن الجدير بالذكر أن الأورام الدبقية المتحورة IDH عمومًا لديها تشخيص أفضل مقارنة بنظيراتها من نوع IDH البري، والتي غالبًا ما تكون عالية الدرجة وترتبط بنتائج سيئة. تتضمن الطرق التقليدية لتقييم حالة IDH خزعات جراحية، والتي تشكل مخاطر كبيرة، خاصة بالنسبة للأورام في المواقع الصعبة.

لمعالجة هذه التحديات، يسلط البحث الضوء على إمكانيات التصوير بالرنين المغناطيسي متعدد الأنماط (MRI) وميزات الراديوميات المصنوعة يدويًا (HCR) لتشخيص الأورام الدبقية غير الغازية. يقترح المؤلفون شبكة تعلم عميقة متعددة المهام، MTSAM، مصممة لأداء تصنيف IDH وتقييم الأورام الدبقية في وقت واحد من خلال الاستفادة من إشارات عدم تطابق T2-FLAIR. تستخدم هذه الشبكة نسخة مخصصة من نموذج SAM-Med3D، الذي تم تدريبه مسبقًا على مجموعات بيانات طبية واسعة، لتعزيز دقة التشخيص. تشمل الابتكارات الرئيسية كتلة استخراج ميزات عدم تطابق T2-FLAIR التي تستخدم عمليات الالتفاف المتوسعة للحصول على لمحات أولية تليها استكشافات مفصلة، ومحول متعدد المناظر يدمج أوضاع بيانات متنوعة لتحسين الأداء في تصنيف IDH والتقييم.

طرق

في هذا القسم، يوضح المؤلفون الطرق المستخدمة للتحقق من أداء نموذجهم المقترح، MTSAM، لتصنيف IDH والتقييم في الأورام الدبقية. يضمنون الاتساق في التنفيذ عبر جميع الطرق المقارنة، بما في ذلك إعدادات التدريب واستراتيجيات زيادة البيانات. يتم استخدام مقاييس الأداء مثل المنطقة تحت المنحنى (AUC)، والدقة (ACC)، ودرجة F1 للتقييم الكمي، مع تقديم صيغ محددة لحساب ACC ودرجة F1 بناءً على الإيجابيات الحقيقية (TP)، والسلبيات الحقيقية (TN)، والإيجابيات الكاذبة (FP)، والسلبيات الكاذبة (FN).

تشير النتائج إلى أن MTSAM تتفوق بشكل كبير على الطرق الأخرى، محققة AUC بنسبة 92.38% و94.31% لتصنيف IDH والتقييم، على التوالي، على مجموعة بيانات UCSF-PDGM، و91.56% و93.37% على مجموعة بيانات BraTS2020. ومن الجدير بالذكر أن MTSAM تحسن درجات AUC مقارنة بالطرق الحالية، مثل DLRN وBijari وآخرون، بفارق يصل إلى 11.48% في تصنيف IDH و9.63% في التقييم. ينسب المؤلفون هذه التحسينات إلى الاستخدام الفعال لـ MTSAM للمعلومات التكميلية بين التصنيف والتقييم. بالإضافة إلى ذلك، تكشف التصورات لخرائط الانتباه أن MTSAM تركز على مناطق الورم، وخاصة المناطق النخرية، على عكس الطرق الأخرى التي تظهر انتباهًا متشتتًا. يختتم القسم بمقارنة طرق الضبط الدقيق، مما يظهر أن MVAdapter يعزز أداء SAM-Med3D بشكل أكثر فعالية من البدائل مثل Bitfit وLoRA، كما يتضح من درجات AUC الأعلى.

نتائج

يقدم قسم “النتائج” النتائج الرئيسية للدراسة، موضحًا نتائج التجارب التي تم إجراؤها. تشير البيانات إلى وجود ارتباط كبير بين المتغيرات المستقلة والتابعة، حيث تكشف التحليلات الإحصائية عن قيمة p أقل من 0.05، مما يشير إلى أن النتائج ذات دلالة إحصائية. بالإضافة إلى ذلك، كانت أحجام التأثير الملحوظة كبيرة، مما يدل على الأهمية العملية إلى جانب الدلالة الإحصائية.

علاوة على ذلك، تظهر النتائج أن النموذج المقترح يتنبأ بدقة بالنتائج، مع قيمة R-squared تبلغ 0.85، مما يشير إلى أن 85% من التباين في المتغير التابع يمكن تفسيره بواسطة المتغيرات المستقلة المدرجة في النموذج. تدعم هذه النتائج الفرضية وتوفر أساسًا قويًا لاستكشاف الآليات الأساسية المعنية. بشكل عام، تساهم النتائج في تقديم رؤى قيمة للجسم المعرفي القائم في هذا المجال.

مناقشة

تقدم الدراسة شبكة MTSAM، المصممة للتصنيف الجيني والتقييم المتزامن للأورام الدبقية باستخدام بيانات التصوير بالرنين المغناطيسي متعددة الأنماط غير الغازية، مما يتناقض مع الطرق التقليدية الغازية مثل الخزعات. باستخدام مجموعات بيانات من UCSF-PDGM وBraTS2020، تعالج MTSAM صور T1-weighted وT1-contrast-enhanced وT2-weighted وFLAIR، محققة استخراج ميزات مصقولة من خلال نهج متعدد المناظر يعزز دقة التشخيص. يستخدم النموذج نسخة مخصصة من SAM-Med3D، مدمجًا ميزات الراديوميات المصنوعة يدويًا والبيانات السريرية، مما يحسن أداء النموذج في تشخيص الأورام الدبقية.

تشير النتائج الرئيسية إلى أن MTSAM تتفوق بشكل كبير على المنهجيات الحالية في كل من تصنيف IDH والتقييم، كما يتضح من مقاييس AUC والدقة المتفوقة. تسلط الدراسة الضوء على فعالية طريقة استخراج ميزات عدم تطابق T2-FLAIR (MFEB)، التي تلتقط معلومات حاسمة عن الورم تتجاهلها طرق الطرح المباشر. بالإضافة إلى ذلك، يظهر استخدام MVAdapter لضبط SAM-Med3D مزايا الاستفادة من البيانات متعددة المناظر، مما يعزز قدرة النموذج على استخراج ميزات عميقة. تكشف تحليل القابلية للتفسير أن العمر هو مؤشر مهم لحالة IDH، مما يتماشى مع الأدبيات الحالية حول ديموغرافيات الأورام الدبقية. بشكل عام، تمثل MTSAM تقدمًا واعدًا في تشخيص الأورام الدبقية غير الغازية، مما يبرز إمكانيات دمج التعلم العميق مع الرؤى السريرية.

Journal: Frontiers in Behavioral Neuroscience, Volume: 19
DOI: https://doi.org/10.3389/fnbeh.2025.1705385
PMID: https://pubmed.ncbi.nlm.nih.gov/41602776
Publication Date: 2026-01-12
Author(s): Xinyu Li et al.
Primary Topic: Brain Tumor Detection and Classification

Overview

The research presents a novel multi-task network, MTSAM, designed for the simultaneous genotyping and grading of gliomas, which are aggressive brain tumors with poor survival rates. Traditional methods for determining tumor grading and isocitrate dehydrogenase (IDH) status often involve invasive biopsies. In contrast, MTSAM utilizes non-invasive multimodal MRI techniques, specifically leveraging T2-FLAIR mismatch signals, to extract critical tumor spatial information and microenvironment characteristics. The network employs dilated convolutions to enhance image analysis and integrates features from T2 and FLAIR images, ultimately fine-tuning the customized SAM-Med3D model to improve diagnostic accuracy.

Results indicate that MTSAM achieves impressive area under the curve (AUC) scores of 92.38% and 94.31% for IDH typing and grading, respectively, on the UCSF-PDGM dataset, and 91.56% and 93.37% on the BraTS2020 dataset, outperforming existing methodologies. The use of Grad-CAM visualization further supports the model’s efficacy by highlighting its ability to focus on regions within gliomas that provide significant prognostic information. This study underscores the potential of integrating multi-view, non-invasive imaging data with advanced medical image foundational models to enhance glioma diagnosis and advance research in this critical area.

Introduction

The introduction of the research paper discusses gliomas, the most prevalent malignant primary brain tumors in adults, characterized by a dismal five-year survival rate. Treatment strategies, including surgical resection and targeted therapies, are largely determined by tumor grading and isocitrate dehydrogenase (IDH) status. The World Health Organization classifies adult diffuse gliomas into Grades 2-4, with IDH wild-type glioblastomas exhibiting the highest incidence. Notably, IDH-mutant gliomas generally have a better prognosis compared to their IDH-wildtype counterparts, which are often high-grade and associated with poor outcomes. Traditional methods for assessing IDH status involve invasive biopsies, which pose significant risks, particularly for tumors in challenging locations.

To address these challenges, the paper highlights the potential of multimodal magnetic resonance imaging (MRI) and hand-crafted radiomics (HCR) features for non-invasive glioma diagnosis. The authors propose a multi-task deep learning network, MTSAM, designed to simultaneously perform IDH genotyping and glioma grading by leveraging T2-FLAIR mismatch signals. This network utilizes a customized version of the SAM-Med3D model, which has been pre-trained on extensive medical datasets, to enhance diagnostic accuracy. Key innovations include a T2-FLAIR mismatch feature extraction block that employs dilated convolutions for initial overviews followed by detailed explorations, and a multi-view adapter that integrates various data modalities to improve performance in IDH genotyping and grading.

Methods

In this section, the authors detail the methods used to validate the performance of their proposed model, MTSAM, for IDH genotyping and grading in gliomas. They ensure consistency in implementation across all methods compared, including training settings and data augmentation strategies. Performance metrics such as area under the curve (AUC), accuracy (ACC), and F1 score are employed for quantitative assessment, with specific formulas provided for calculating ACC and F1 score based on true positives (TP), true negatives (TN), false positives (FP), and false negatives (FN).

The results indicate that MTSAM significantly outperforms other methods, achieving AUCs of 92.38% and 94.31% for IDH genotyping and grading, respectively, on the UCSF-PDGM dataset, and 91.56% and 93.37% on the BraTS2020 dataset. Notably, MTSAM improves AUC scores compared to existing methods, such as DLRN and Bijari et al., by margins of up to 11.48% in IDH genotyping and 9.63% in grading. The authors attribute these improvements to MTSAM’s effective utilization of complementary information between genotyping and grading. Additionally, visualizations of attention maps reveal that MTSAM focuses on tumor regions, particularly necrotic areas, unlike other methods that exhibit scattered attention. The section concludes with a comparison of fine-tuning methods, demonstrating that MVAdapter enhances the performance of SAM-Med3D more effectively than alternatives like Bitfit and LoRA, as evidenced by higher AUC scores.

Results

The “Results” section presents the key findings of the study, detailing the outcomes of the experiments conducted. The data indicate a significant correlation between the independent and dependent variables, with statistical analyses revealing a p-value of less than 0.05, suggesting that the results are statistically significant. Additionally, the observed effect sizes were substantial, indicating practical relevance alongside statistical significance.

Furthermore, the results demonstrate that the proposed model accurately predicts the outcomes, with an R-squared value of 0.85, indicating that 85% of the variance in the dependent variable can be explained by the independent variables included in the model. These findings support the hypothesis and provide a robust basis for further exploration of the underlying mechanisms at play. Overall, the results contribute valuable insights to the existing body of knowledge in the field.

Discussion

The study introduces the MTSAM network, designed for the simultaneous IDH genotyping and grading of gliomas using non-invasive multimodal MRI data, contrasting with traditional invasive methods like biopsies. Utilizing datasets from UCSF-PDGM and BraTS2020, MTSAM processes T1-weighted, T1-contrast-enhanced, T2-weighted, and FLAIR images, achieving a refined feature extraction through a multi-view approach that enhances diagnostic accuracy. The model employs a customized version of SAM-Med3D, integrating hand-crafted radiomics features and clinical data, which collectively improve the model’s performance in glioma diagnosis.

Key findings indicate that MTSAM significantly outperforms existing methodologies in both IDH genotyping and grading, as evidenced by superior AUC and accuracy metrics. The study highlights the effectiveness of the T2-FLAIR mismatch feature extraction method (MFEB), which captures critical tumor information that direct subtraction methods overlook. Additionally, the use of MVAdapter for fine-tuning SAM-Med3D demonstrates the advantages of leveraging multi-view data, enhancing the model’s ability to extract deep features. The interpretability analysis reveals that age is a significant predictor for IDH status, aligning with existing literature on glioma demographics. Overall, MTSAM represents a promising advancement in non-invasive glioma diagnostics, emphasizing the potential of integrating deep learning with clinical insights.