الانتباه الهجين والعتبة القابلة للتعلم لتجزئة أورام الدماغ ثلاثية الأبعاد Hybrid Attention and Learnable Thresholding for 3D Brain Tumor Segmentation

شارك:
المجلة: International Journal of Online and Biomedical Engineering (iJOE)، المجلد: 22، العدد: 3
DOI: https://doi.org/10.3991/ijoe.v22i03.58359
تاريخ النشر: 2026-03-05
المؤلف: Salma Ghali وآخرون
الموضوع الرئيسي: كشف وتصنيف أورام الدماغ

نظرة عامة

تتناول ورقة البحث التحدي الحاسم المتمثل في تقسيم الأورام بدقة في الصور الطبية ثلاثية الأبعاد، وهو أمر ضروري للتشخيص الفعال للسرطان وتخطيط العلاج. على الرغم من التقدم في تقنيات التشفير التلقائي والهياكل الشبيهة بـ U-Net، لا تزال هناك مشكلات تتعلق بدقة حدود التقسيم، خاصة للأشكال المعقدة للأورام. لمواجهة ذلك، يقترح المؤلفون نموذجًا هجينًا يعزز استخراج الميزات من خلال آلية انتباه هجين (HA)، تدمج بين الانتباه على مستوى القناة والانتباه الهيكلي المستند إلى الاستفسارات المتعلمة. بالإضافة إلى ذلك، تم تقديم طبقة عتبة قابلة للتعلم (DLT) لتحسين حدود التقسيم. تم اختبار النموذج على مجموعة بيانات تقسيم أورام الدماغ (BraTS) 2020، محققًا درجة Dice تبلغ 92.0 لتقسيم الورم بالكامل، مما يظهر تحسينات كبيرة مقارنة بالمعايير الحالية.

في الختام، تقدم الدراسة إطار عمل قويًا لتشفير ثلاثي الأبعاد يتضمن آلية HA وطبقة DLT، مما يؤدي إلى دقة تقسيم فائقة وكمية حجمية لمناطق الورم، مما يعزز بشكل خاص تحديد أحجام الورم المعزز (ET) والورم بالكامل (WT). لا يساهم هذا التقدم فقط في تبسيط سير العمل السريري من خلال أتمتة عمليات التقسيم، ولكن أيضًا يقلل من الفجوات المرتبطة بالتتبع اليدوي. ومع ذلك، فإن تدريب النموذج يتطلب موارد كبيرة، مما يشكل عائقًا أمام التطبيق الأوسع. ستركز الأعمال المستقبلية على تحسين تخصيص الموارد من خلال تقنيات مثل التكميم وتقطير المعرفة، بالإضافة إلى تحسين قدرة النموذج على التكيف مع بيانات المرضى المتنوعة والاستخدام السريري في الوقت الحقيقي.

مقدمة

تسلط مقدمة ورقة البحث هذه الضوء على التقدم الكبير في التصوير بالرنين المغناطيسي (MRI) والتصوير المقطعي المحوسب (CT) الذي عزز تشخيص وعلاج أورام الدماغ، وخاصة الأنواع الصعبة مثل الوذمة. يعد التقسيم الدقيق لأورام الدماغ أمرًا حيويًا للتخطيط الجراحي الفعال، وحساب الحجم، ومراقبة تقدم المرض. تعاني طرق التقسيم التقليدية من قيود بسبب تعقيد البيانات السريرية، مما دفع إلى التحول نحو تقنيات التعلم العميق، وخاصة الشبكات العصبية التلافيفية (CNNs) والتشفير التلقائي ثلاثي الأبعاد، التي أظهرت وعدًا في تقييم الصور الطبية.

على الرغم من هذه التقدمات، لا يزال تحقيق دقة تقسيم عالية للأورام ذات الأشكال غير المنتظمة يمثل تحديًا. تناقش الورقة دمج آليات الانتباه ضمن نماذج التعلم العميق لتحسين تعلم الميزات ودقة التقسيم. تقدم آلية عتبة قابلة للتعلم تعتمد على دالة سيغمويد، مما يسمح بتعلم انحياز العتبة الديناميكي، مما يعزز عملية التقسيم. يبني الهيكل المقترح على تكوين U-Net ثلاثي الأبعاد القياسي، ويشمل آليات انتباه هجين وعتبة قابلة للتعلم لتحسين تقسيم الورم. تمهد المقدمة الطريق للأقسام التالية، التي ستفصل الأعمال ذات الصلة، وهيكل النموذج المقترح، وتصميم التجارب، والنتائج، واتجاهات البحث المستقبلية.

الطرق

يوفر قسم المنهجية في الورقة نظرة عامة مفصلة عن مجموعة البيانات، وإعداد البيانات، وهيكل التشفير التلقائي المتغير ثلاثي الأبعاد المقترح لتقسيم أورام الدماغ. يتكون الشبكة من ثلاثة مكونات رئيسية: مشفر، ومساهمات من الانتباه الهجين (HA) وعتبة قابلة للتعلم (DLT)، ومفكك. تم تصميم الهيكل لتعزيز دقة التقسيم من خلال دمج وحدات HA داخلية وخارجية، مما يسهل تحسين التسلسل والتزاوج القائم على التدرج. تتيح هذه الطريقة للنموذج التركيز على مناطق الورم الصغيرة والمتنوعة من الناحية الطوبولوجية مع التخفيف من آثار التخفيف المكاني المرتبطة عادة بنقص الانتباه القنوي.

توضح إعدادات التجربة مقاييس الأداء المستخدمة لتقييم التشفير التلقائي ثلاثي الأبعاد وتحدد متطلبات الأجهزة للتدريب. تقارن الورقة النموذج المقترح بأساليب متقدمة موجودة، مثل U-Net ثلاثي الأبعاد وU-Net المعزز بالانتباه، مع التأكيد على مساهماته الفريدة. من الجدير بالذكر أن آلية الانتباه في النموذج تتكيف ديناميكيًا مع الأشكال المتنوعة للأورام الدماغية النقيلي، وأن تضمين طبقة عتبة قابلة للتعلم يعزز دقة التقسيم دون الاعتماد على عتبات ثابتة. على الرغم من هذه التقدمات، يعترف المؤلفون بوجود قيود كبيرة، خاصة الطلبات العالية للموارد للتدريب على الصور الطبية ثلاثية الأبعاد عالية الدقة والحاجة إلى مزيد من التحقق عبر مجموعات بيانات سريرية متنوعة لتقييم قدرات التعميم. بالإضافة إلى ذلك، يثير نقص المقاييس المحددة لزمن الاستدلال مخاوف بشأن دمج النموذج في سير العمل السريري.

النتائج

في قسم النتائج، يتم تقديم تقييم نموذج التشفير التلقائي ثلاثي الأبعاد لتقسيم أورام الدماغ، مع التركيز على التقييمات الكمية والنوعية. يتم قياس أداء النموذج كميًا باستخدام مقاييس مثل معامل تشابه Dice (DSC) والمسافة هاوسدورف عند 95% (HD95)، والتي تشير إلى دقة عالية في التقسيم ودقة الحدود. تدعم التحليلات النوعية هذه النتائج، حيث تعرض خرائط التقسيم التي تتماشى عن كثب مع تعليقات الخبراء، خاصة في تحديد حدود الأورام المعقدة، بما في ذلك تلك ذات الأشكال غير المنتظمة والمناطق المنتشرة.

بالإضافة إلى ذلك، يتم فحص منحنيات خسارة التدريب لتوفير رؤى حول مسار تعلم النموذج، وعملية التحسين، ومشكلات الإفراط في التكيف المحتملة. يتم أيضًا إجراء دراسة إلغاء لتقييم تأثير مكونات النموذج المختلفة على الأداء العام. تظهر النتائج المرئية قدرة النموذج على التقاط الهياكل المعقدة للأورام بدقة، مع تطابق الأقنعة المتوقعة عن كثب مع التعليقات المرجعية، مما يؤكد فعالية النموذج في السيناريوهات السريرية التي تتميز بتنوع كبير في تقديم الأورام.

المناقشة

تسلط المناقشة الضوء على التقدم الكبير في تقسيم أورام الدماغ من صور الرنين المغناطيسي ثلاثية الأبعاد، مدفوعة بشكل أساسي بتقنيات التعلم العميق، وخاصة الشبكات العصبية التلافيفية (CNNs). أصبحت تحديات تقسيم أورام الدماغ متعددة الوسائط (BraTS) معيارًا محوريًا، مما يظهر فعالية الأطر المتقدمة للتعلم العميق وطرق التدريب. من الجدير بالذكر أن تجميع النموذج وتقنيات الإشراف العميق كانت لها دور أساسي في تعزيز دقة التقسيم، حيث تعتبر مختلف تباينات U-Net نماذج أساسية. لقد ساهمت الابتكارات الحديثة، مثل آليات الانتباه والهياكل الهجينة، في تحسين قدرات التقسيم من خلال تمكين النماذج من التركيز على المناطق الحرجة في الصورة، مما يحسن الأداء في تحديد حدود الأورام.

يتضمن هيكل التشفير التلقائي ثلاثي الأبعاد المقترح آلية انتباه هجين (HA) وعتبة قابلة للتعلم (DLT) لمعالجة التحديات المرتبطة بالحقول الاستقبالية الثابتة في الطبقات التلافيفية. يظهر هذا الهيكل أداءً متفوقًا في التقسيم على مجموعة بيانات BraTS 2020، محققًا معاملات تشابه Dice عالية (DSC) ومسافات هاوسدورف منخفضة (HD) مقارنة بالأطر المعتمدة. تؤكد قدرة النموذج على تقسيم مناطق الورم الفرعية بدقة، وخاصة الورم المعزز (ET)، على أهميته السريرية، حيث يقلل من النتائج السلبية الكاذبة ويحافظ على الأنسجة السليمة أثناء التدخلات الجراحية. بشكل عام، يضع دمج آليات الانتباه المتقدمة والعتبة القابلة للتكيف هذا النموذج كأداة واعدة لتقسيم الصور الطبية بدقة، مع آثار لتحسين استراتيجيات التشخيص والعلاج في علم الأورام.

Journal: International Journal of Online and Biomedical Engineering (iJOE), Volume: 22, Issue: 3
DOI: https://doi.org/10.3991/ijoe.v22i03.58359
Publication Date: 2026-03-05
Author(s): Salma Ghali et al.
Primary Topic: Brain Tumor Detection and Classification

Overview

The research paper addresses the critical challenge of accurately segmenting tumors in 3D medical images, which is essential for effective cancer diagnosis and treatment planning. Despite advancements in autoencoding techniques and U-Net-like architectures, issues with segmentation boundary precision remain, particularly for complex tumor shapes. To tackle this, the authors propose a hybrid model that enhances feature extraction through a hybrid attention (HA) mechanism, integrating both channel-wise and learned query structural attention. Additionally, a differentiable learnable thresholding (DLT) layer is introduced to refine segmentation boundaries. The model was tested on the Brain Tumor Segmentation (BraTS) 2020 dataset, achieving a Dice score of 92.0 for whole tumor segmentation, demonstrating significant improvements over existing benchmarks.

In conclusion, the study presents a robust 3D autoencoder framework that incorporates the HA mechanism and DLT layer, resulting in superior segmentation accuracy and volumetric quantification of tumor regions, particularly enhancing the delineation of enhancing tumor (ET) and whole tumor (WT) volumes. This advancement not only streamlines clinical workflows by automating segmentation processes but also minimizes discrepancies associated with manual tracing. However, the training of the model is resource-intensive, posing a barrier to broader application. Future work will focus on optimizing resource allocation through techniques such as quantization and knowledge distillation, as well as improving the model’s adaptability for diverse patient data and real-time clinical use.

Introduction

The introduction of this research paper highlights the significant advancements in magnetic resonance imaging (MRI) and computed tomography (CT) that have enhanced the diagnosis and treatment of brain tumors, particularly challenging types such as edema. Accurate segmentation of brain tumors is crucial for effective surgical planning, volume calculation, and monitoring disease progression. Traditional segmentation methods have limitations due to the complexity of clinical data, prompting a shift towards deep learning techniques, particularly Convolutional Neural Networks (CNNs) and 3D autoencoders, which have shown promise in medical image evaluation.

Despite these advancements, achieving high segmentation accuracy for irregularly shaped tumors remains a challenge. The paper discusses the integration of attention mechanisms within deep learning models to improve feature learning and segmentation precision. It introduces a novel endpoint differentiable, sigmoid-based learnable thresholding mechanism that allows for dynamic threshold bias learning, enhancing the segmentation process. The proposed architecture builds on the standard 3D U-Net configuration, incorporating hybrid attention mechanisms and differentiable learnable thresholding to refine tumor segmentation. The introduction sets the stage for the subsequent sections, which will detail related work, the architecture of the proposed model, experimental design, results, and future research directions.

Methods

The methodology section of the paper provides a detailed overview of the dataset, data preparation, and the architecture of the proposed 3D variational autoencoder for brain tumor segmentation. The network comprises three main components: an encoder, contributions from hybrid attention (HA) and differentiable learnable thresholding (DLT), and a decoder. The architecture is designed to enhance segmentation accuracy by incorporating intra- and inter-encoder HA modules, which facilitate sequential refinement and gradient-adaptive coupling. This approach allows the model to focus on small, topologically diverse tumor regions while mitigating the spatial dilution effects commonly associated with channel attention deficits.

The experimental setup outlines the performance metrics utilized to evaluate the 3D autoencoder and specifies the hardware requirements for training. The paper contrasts the proposed model with existing state-of-the-art methods, such as 3D U-Net and Attention-Augmented U-Net, emphasizing its unique contributions. Notably, the model’s attention mechanism adapts dynamically to the diverse morphologies of metastatic brain tumors, and the inclusion of a learnable thresholding layer enhances segmentation precision without relying on fixed thresholds. Despite these advancements, the authors acknowledge significant limitations, particularly the high resource demands for training on high-resolution 3D medical images and the need for further validation across diverse clinical datasets to assess generalization capabilities. Additionally, the lack of defined metrics for inference latency raises concerns regarding the model’s integration into clinical workflows.

Results

In the Results section, the evaluation of the 3D autoencoder model for brain tumor segmentation is presented, emphasizing both quantitative and qualitative assessments. The model’s performance is quantitatively measured using metrics such as the Dice Similarity Coefficient (DSC) and Hausdorff Distance at 95% (HD95), which indicate high precision in segmentation and contour accuracy. Qualitative analyses further support these findings, showcasing segmentation maps that align closely with expert annotations, particularly in delineating complex tumor boundaries, including those of irregular shapes and diffuse regions.

Additionally, the training loss curves are examined to provide insights into the model’s learning trajectory, optimization process, and potential overfitting issues. An ablation study is also conducted to assess the impact of various model components on overall performance. The visual results demonstrate the model’s capability to accurately capture intricate tumor structures, with predicted masks closely matching reference annotations, thereby confirming the effectiveness of the model in clinical scenarios characterized by significant variability in tumor presentation.

Discussion

The discussion highlights significant advancements in brain tumor segmentation from 3D MRIs, primarily driven by deep learning techniques, particularly Convolutional Neural Networks (CNNs). The Multimodal Brain Tumor Segmentation (BraTS) challenge has become a pivotal benchmark, showcasing the effectiveness of sophisticated deep learning frameworks and training methodologies. Notably, model assembly and deep supervision techniques have been instrumental in enhancing segmentation accuracy, with various U-Net variations serving as foundational models. Recent innovations, such as attention mechanisms and hybrid architectures, have further refined segmentation capabilities by enabling models to focus on critical image areas, thereby improving performance in delineating tumor boundaries.

The proposed 3D autoencoder architecture incorporates a Hybrid Attention (HA) mechanism and Differentiable Learnable Thresholding (DLT) to address challenges associated with static receptive fields in convolutional layers. This architecture demonstrates superior segmentation performance on the BraTS 2020 dataset, achieving high Dice Similarity Coefficients (DSC) and low Hausdorff Distances (HD) compared to established frameworks. The model’s ability to accurately segment tumor sub-regions, particularly the Enhancing Tumor (ET), underscores its clinical relevance, as it minimizes false negatives and preserves healthy tissue during surgical interventions. Overall, the integration of advanced attention mechanisms and adaptive thresholding positions this model as a promising tool for precise medical image segmentation, with implications for improved diagnostic and therapeutic strategies in oncology.