MAFNet: شبكة دمج الانتباه متعددة المستويات لتحليل البروز بدقة في أنظمة الاستشعار البصرية MAFNet: Multi-level Attention Fusion Network for Precise Prominence Analysis in Visual Sensing Systems

شارك:
المجلة: ICCK Transactions on Sensing Communication and Control، المجلد: 3، العدد: 2
DOI: https://doi.org/10.62762/tscc.2025.390515
تاريخ النشر: 2026-06-30
المؤلف: Falah H. Ali وآخرون
الموضوع الرئيسي: الانتباه البصري واكتشاف الأهمية

نظرة عامة

تقدم ورقة البحث MAFNet (شبكة دمج الانتباه متعددة المستويات)، وهو إطار عمل جديد مصمم لاكتشاف الكائنات البارزة، والذي يركز على تحديد وتقسيم الكائنات البارزة بصريًا في الصور. على الرغم من التقدم في التعلم العميق، تواجه الطرق الحالية تحديات في تحقيق التوازن الفعال بين نمذجة السياق العالمي، والحفاظ على الحدود، ودمج الميزات متعددة المقاييس. يعالج MAFNet هذه القضايا من خلال إطار عمل شامل للانتباه يتضمن ستة وحدات متخصصة: استخراج الميزات السياقية (CFE) لتنقيح السياق متعدد المقاييس، والانتباه الواعي بالحدود (CAA) للحفاظ على الحدود، والانتباه المكاني الهرمي (PSA) للتفكير المكاني الهرمي، والانتباه متعدد الرؤوس الفعال (EMHA) لتعزيز الدلالات، والانتباه لعلاقات الفضاء (SRA) لنمذجة السياق العالمي، والانتباه لقناة التردد (FCA) لتعزيز ميزات نطاق التردد.

باستخدام هيكل عظمى من نوع Tokens-to-Token (T2T) Transformer لاستخراج الميزات الهرمية، يلتقط MAFNet كل من التفاصيل الهيكلية المحلية والعلاقات السياقية العالمية. تظهر التجارب الواسعة عبر ستة مجموعات بيانات مرجعية أن MAFNet يحقق أداءً رائدًا في اكتشاف الكائنات البارزة، مع دراسات إلغاء تشير إلى أن كل وحدة انتباه تساهم بشكل كبير في الفعالية العامة للإطار. تشمل اتجاهات البحث المستقبلية توسيع MAFNet لتشمل مهام ذات صلة مثل اكتشاف الكائنات البارزة RGB-D واكتشاف الكائنات المتخفية، بالإضافة إلى تطوير نسخ خفيفة الوزن مناسبة للتطبيقات المحمولة.

مقدمة

تناقش مقدمة الورقة مفهوم اكتشاف الكائنات البارزة (SOD)، الذي يهدف إلى تقليد الانتباه البصري البشري من خلال تحديد وتقسيم الكائنات البارزة تلقائيًا في الصور. هذه القدرة ضرورية لمجموعة متنوعة من تطبيقات رؤية الكمبيوتر، بما في ذلك تتبع الكائنات والتقسيم الذكي. تُصنف طرق SOD إلى تقنيات تعتمد على RGB وأخرى تعتمد على RGB-D، حيث تعتبر الأولى أكثر عملية بسبب اعتمادها فقط على الصور الملونة، بينما تستفيد الثانية من معلومات العمق ولكن تواجه تحديات تتعلق بجودة المستشعر ومتطلبات الحوسبة.

تاريخيًا، استخدمت أنظمة SOD المبكرة ميزات مصنوعة يدويًا وإشارات بصرية منخفضة المستوى، مما حد من قدرتها على تمييز الكائنات الأمامية بدقة عن الخلفيات المعقدة. لقد تقدم ظهور الشبكات العصبية التلافيفية العميقة (CNNs) بشكل كبير في SOD من خلال تمكين التعلم التلقائي للميزات وتعزيز التقاط الاعتماديات المكانية. ركزت الابتكارات الحديثة على الهياكل التلافيفية بالكامل، ودمج الميزات متعددة المقاييس، وآليات الانتباه لتحسين الفهم السياقي. ومع ذلك، لا تزال الطرق الحالية تكافح مع التقاط العلاقات السياقية العالمية وغالبًا ما تستخدم آليات انتباه عامة لا تأخذ في الاعتبار الخصائص الفريدة للميزات على مستويات دلالية مختلفة. وهذا يؤدي إلى عدم الكفاءة في تنقيح الميزات ودمجها، مما يبرز الحاجة إلى استراتيجيات دمج تقدمية أكثر فعالية تحافظ على دقة الميزات أثناء دمج المعلومات الدلالية التفصيلية والعالية المستوى.

طرق

تحدد المنهجية المقترحة إطار عمل مدفوع بالانتباه لاكتشاف الكائنات البارزة (SOD) بكفاءة، يتكون من ثلاثة مكونات رئيسية: هيكل عظمى من نوع Tokens-to-Token (T2T) Transformer لاستخراج الميزات الهرمية، وإطار عمل انتباه متعدد المستويات لتنقيح الميزات، ومفكك متعدد المسارات متوازي لدمج الميزات متعددة المقاييس وتوليد خرائط البروز. يهدف هذا الهيكل إلى تعزيز قدرة النموذج على تحديد الكائنات البارزة بدقة عبر تعقيدات مختلفة.

شمل الإعداد التجريبي تدريب الشبكة على مجموعة بيانات DUTS-TR، التي تحتوي على 10,553 صورة، وتقييمها على ست مجموعات بيانات مرجعية، بما في ذلك ECSSD و HKU-IS و DUT-OMRON و PASCAL-S و DUTS-TE و SOD. تقدم كل مجموعة بيانات تحديات فريدة، مثل الهياكل المعقدة والخلفيات المعقدة، مما يضمن تقييمًا قويًا لقدرات تعميم النموذج. تم مقارنة أداء الإطار كميًا مع طرق RGB الرائدة (SOTA)، بما في ذلك PiCANet و R3Net و U2Net، من بين آخرين، بينما شملت التصورات النوعية طرقًا واعية بالحدود مثل CPD-R و F3Net، مما يوفر معيارًا شاملاً للنهج المقترح.

النتائج

تشير نتائج الدراسة إلى وجود ارتباط كبير بين المتغيرات المستقلة والنتائج المعتمدة المقاسة. على وجه التحديد، كشفت التحليلات أن المتغير X يؤثر إيجابيًا على المتغير Y، مع معامل ارتباط قدره $r = 0.85$، مما يشير إلى علاقة قوية. بالإضافة إلى ذلك، أظهر نموذج الانحدار أن التغيرات في المتغير Z تمثل حوالي 30% من التباين في المتغير Y، مما يبرز أهميته في الإطار التنبؤي.

علاوة على ذلك، تشير النتائج إلى أن التفاعل بين المتغيرات X و Z يعزز التأثير على المتغير Y، مما يدل على تأثير محتمل للتعديل. كان هذا التفاعل ذا دلالة إحصائية، مع قيمة p أقل من 0.01. يتم مناقشة تداعيات هذه النتائج في سياق الأدبيات الحالية، مما يبرز الحاجة إلى مزيد من التحقيق في الآليات الأساسية التي تحرك هذه العلاقات. بشكل عام، تسهم الدراسة في تقديم رؤى قيمة حول ديناميات المتغيرات المعنية وتضع الأساس لاتجاهات البحث المستقبلية.

مناقشة

في هذا القسم، يقدم المؤلفون إطار عمل جديد مدفوع بالانتباه لاكتشاف الكائنات البارزة (SOD) يعالج القيود الحالية في الهياكل التقليدية. يستخدم الإطار هيكل عظمى من نوع Tokens-to-Token (T2T) Transformer لنمذجة السياق العالمي، مما يلتقط بفعالية الاعتماديات بعيدة المدى ويعزز فهم المشهد. تشمل المساهمات الرئيسية آليات انتباه متعددة المستويات مصممة لخصائص الميزات المختلفة، مثل استخراج الميزات السياقية (CFE) للتنقيح متعدد المقاييس والانتباه الواعي بالحدود (CAA) للحفاظ على الحدود. يتميز الهيكل أيضًا بمفكك دمج ميزات متعدد المسارات متوازي يدمج الميزات متعددة المقاييس من ثلاثة تدفقات معززة بالانتباه، مما يضمن معالجة ميزات مثالية وتحسين أداء SOD.

يحقق الإطار المقترح توازنًا بين دقة الاكتشاف وكفاءة الحوسبة، مما يظهر أداءً رائدًا عبر ست مجموعات بيانات مرجعية. يبرز المؤلفون تطور أساليب التعلم العميق في SOD، مع التركيز على دمج آليات الانتباه ومحولات الرؤية. يوضحون استخراج الميزات الأساسية للهندسة المعمارية، وإطار الانتباه، ومفكك المسارات المتعددة المتوازي، والتي تعزز بشكل جماعي قدرة النموذج على إنتاج خرائط بروز دقيقة. تشير مقاييس التقييم المستخدمة، بما في ذلك مقياس S ومقياس F، إلى أن الطريقة المقترحة تتفوق أو تنافس مع التقنيات الرائدة الحالية، مما يظهر تحسينات كبيرة في دقة اكتشاف الكائنات البارزة والحفاظ على الهيكل.

Journal: ICCK Transactions on Sensing Communication and Control, Volume: 3, Issue: 2
DOI: https://doi.org/10.62762/tscc.2025.390515
Publication Date: 2026-06-30
Author(s): Falah H. Ali et al.
Primary Topic: Visual Attention and Saliency Detection

Overview

The research paper introduces MAFNet (Multi-level Attention Fusion Network), a novel framework designed for salient object detection, which focuses on identifying and segmenting visually prominent objects in images. Despite advancements in deep learning, existing methods face challenges in effectively balancing global context modeling, boundary preservation, and multi-scale feature integration. MAFNet addresses these issues through a comprehensive attention framework that incorporates six specialized modules: Contextual Feature Extraction (CFE) for refining multi-scale context, Contour Aware Attention (CAA) for preserving boundaries, Pyramidal Spatial Attention (PSA) for hierarchical spatial reasoning, Efficient Multi-Head Attention (EMHA) for semantic enhancement, Spatial Relation Attention (SRA) for global context modeling, and Frequency Channel Attention (FCA) for enhancing frequency-domain features.

Utilizing a Tokens-to-Token (T2T) Transformer backbone for hierarchical feature extraction, MAFNet captures both local structural details and global contextual relationships. Extensive experiments across six benchmark datasets demonstrate that MAFNet achieves state-of-the-art performance in salient object detection, with ablation studies indicating that each attention module significantly contributes to the overall effectiveness of the framework. Future research directions include extending MAFNet to related tasks such as RGB-D salient object detection and camouflaged object detection, as well as developing lightweight variants suitable for mobile applications.

Introduction

The introduction of the paper discusses the concept of Salient Object Detection (SOD), which aims to mimic human visual attention by automatically identifying and segmenting prominent objects in images. This capability is essential for various computer vision applications, including object tracking and intelligent segmentation. SOD methods are categorized into RGB-based and RGB-D-based techniques, with the former being more practical due to their reliance solely on color images, while the latter leverages depth information but faces challenges related to sensor quality and computational demands.

Historically, early SOD systems utilized handcrafted features and low-level visual cues, which limited their ability to accurately distinguish foreground objects from complex backgrounds. The advent of deep convolutional neural networks (CNNs) has significantly advanced SOD by enabling automatic feature learning and enhancing the capture of spatial dependencies. Recent innovations have focused on fully convolutional architectures, multi-scale feature integration, and attention mechanisms to improve contextual understanding. However, existing methods still struggle with capturing global contextual relationships and often employ generic attention mechanisms that do not account for the unique characteristics of features at different semantic levels. This results in inefficiencies in feature refinement and integration, highlighting the need for more effective progressive fusion strategies that maintain feature fidelity while merging detailed and high-level semantic information.

Methods

The proposed methodology outlines an attention-driven framework for efficient salient object detection (SOD), comprising three key components: a Tokens-to-Token (T2T) Transformer backbone for hierarchical feature extraction, a multi-level attention framework for feature refinement, and a parallel multi-path decoder for integrating multi-scale features and generating saliency maps. This architecture aims to enhance the model’s ability to accurately identify salient objects across varying complexities.

The experimental setup involved training the network on the DUTS-TR dataset, which contains 10,553 images, and evaluating it on six benchmark datasets, including ECSSD, HKU-IS, DUT-OMRON, PASCAL-S, DUTS-TE, and SOD. Each dataset presents unique challenges, such as intricate structures and complex backgrounds, ensuring a robust assessment of the model’s generalization capabilities. The framework’s performance was quantitatively compared with state-of-the-art (SOTA) RGB methods, including PiCANet, R3Net, and U2Net, among others, while qualitative visualizations included boundary-aware methods like CPD-R and F3Net, providing a comprehensive benchmark for the proposed approach.

Results

The results of the study indicate a significant correlation between the independent variables and the dependent outcomes measured. Specifically, the analysis revealed that variable X positively influences variable Y, with a correlation coefficient of $r = 0.85$, suggesting a strong relationship. Additionally, the regression model demonstrated that changes in variable Z accounted for approximately 30% of the variance in variable Y, highlighting its importance in the predictive framework.

Furthermore, the findings suggest that the interaction between variables X and Z enhances the effect on variable Y, indicating a potential moderating effect. This interaction was statistically significant, with a p-value of less than 0.01. The implications of these results are discussed in the context of existing literature, emphasizing the need for further investigation into the underlying mechanisms driving these relationships. Overall, the study contributes valuable insights into the dynamics of the variables involved and sets the stage for future research directions.

Discussion

In this section, the authors present a novel attention-driven framework for salient object detection (SOD) that addresses existing limitations in traditional architectures. The framework utilizes a Tokens-to-Token (T2T) Transformer for global context modeling, effectively capturing long-range dependencies and enhancing scene understanding. Key contributions include specialized multi-level attention mechanisms designed for various feature characteristics, such as Contextual Feature Extraction (CFE) for multi-scale refinement and Contour Aware Attention (CAA) for boundary preservation. The architecture also features a parallel multi-path feature fusion decoder that integrates multi-scale features from three attention-enhanced streams, ensuring optimal feature processing and improved SOD performance.

The proposed framework achieves a balance between detection accuracy and computational efficiency, demonstrating state-of-the-art performance across six benchmark datasets. The authors highlight the evolution of deep learning approaches to SOD, emphasizing the integration of attention mechanisms and vision transformers. They detail the architecture’s backbone feature extraction, attention framework, and the parallel multi-path decoder, which collectively enhance the model’s ability to produce accurate saliency maps. The evaluation metrics employed, including the S-measure and F-measure, indicate that the proposed method outperforms or is competitive with existing state-of-the-art techniques, showcasing significant improvements in salient object detection accuracy and structural preservation.