DOI: https://doi.org/10.1038/s41598-024-84938-4
PMID: https://pubmed.ncbi.nlm.nih.gov/39755781
تاريخ النشر: 2025-01-04
المؤلف: Jingyang Wang وآخرون
الموضوع الرئيسي: تطبيقات الشبكات العصبية المتقدمة
نظرة عامة
تقدم البحث نموذج CPDD-YOLOv8، المصمم لتعزيز اكتشاف الأجسام الصغيرة في الصور الجوية، والتي غالبًا ما تشكل تحديات بسبب ارتفاعها العالي ووجود العديد من الأجسام الصغيرة التي يصعب تمييزها. يتضمن النموذج عدة هياكل مبتكرة: هيكل C2fGAM يدمج آلية الانتباه العالمية (GAM) في العمود الفقري C2f لتحسين الفهم الدلالي؛ تم تقديم طبقة اكتشاف جديدة، P2، لالتقاط الميزات السطحية؛ ويستبدل هيكل DSC2f الالتفاف القياسي في Bottleneck بعملية الالتفاف الديناميكي (DSConv) للتكيف بشكل أفضل مع المدخلات المتغيرة. بالإضافة إلى ذلك، يستخدم الرأس الديناميكي (DyHead) آليات انتباه متعددة لتخصيص أوزان لطبقات الميزات المختلفة.
تظهر النتائج التجريبية فعالية CPDD-YOLOv8، حيث تحقق دقة متوسطة (mAP) تبلغ 41% عند عتبة IoU 0.5، متجاوزة أداء سبعة نماذج مقارنة، بما في ذلك تحسين بنسبة 6.9% مقارنة بـ YOLOv8. تم تحسين معدل اكتشاف الأجسام الصغيرة في النموذج بنسبة 13.1%، وتم التحقق من قابليته للتعميم عبر مجموعات بيانات متعددة، بما في ذلك WiderPerson و VOC_MASK. بينما يحسن CPDD-YOLOv8 بشكل كبير من دقة الاكتشاف، يعترف المؤلفون بالحاجة إلى مزيد من التحسين لتقليل حجم النموذج وتعزيز جدوى النشر، مما يشير إلى اتجاهات البحث المستقبلية التي تركز على تحقيق التوازن بين الدقة والكفاءة الحاسوبية.
الطرق
يستخدم البحث مجموعة بيانات VisDrone2019، التي تشمل مجموعة متنوعة من الظروف عبر 14 منطقة في الصين، بما في ذلك البيئات الريفية والحضرية. تتكون هذه المجموعة من 10 فئات متميزة: المشاة، الناس، السيارة، الفان، الحافلة، الشاحنة، الدراجة النارية، الدراجة، الدراجة ذات المظلة، والدراجة الثلاثية. بالنسبة للتجارب، تم تخصيص ما مجموعه 6,471 صورة للتدريب، و548 للتحقق، و1,610 للاختبار. مجموعة بيانات VisDrone2019 متاحة للجمهور ويمكن تنزيلها من الرابط المقدم على GitHub.
المناقشة
تسلط قسم المناقشة في ورقة البحث الضوء على التقدم في خوارزميات اكتشاف الأجسام، مصنفة إياها إلى طرق ذات مرحلة واحدة وذات مرحلتين. يتم مناقشة التحسينات الملحوظة في نماذج مثل YOLOv3 و YOLOv5، مع التركيز على تحسينات في الدقة وقدرات استخراج الميزات. على سبيل المثال، قام هوانغ وآخرون بتحسين YOLOv3 من خلال زيادة دقة المدخلات وإضافة طبقات تخطيط الميزات، بينما دمج تشاو وآخرون MobileNetv3 في YOLOv5 لتعزيز استخراج الميزات، على الرغم من التكلفة التي تؤثر على الدقة المتوسطة (mAP). يتناول القسم أيضًا قيود النماذج الحالية، لا سيما في البيئات المعقدة أو عند اكتشاف الأجسام الصغيرة، مما يبرز الحاجة إلى مزيد من البحث لتعزيز المتانة والأداء.
يهدف نموذج CPDD-YOLOv8 المقترح إلى معالجة هذه القيود من خلال تقديم هياكل مبتكرة مثل طبقات C2fGAM و P2 للاكتشاف، والتي تعزز قدرة النموذج على اكتشاف الأجسام الصغيرة في المشاهد المعقدة. يحسن هيكل C2fGAM حساسية الميزات، بينما تتيح طبقة P2 اكتشاف أجسام أصغر (4×4 بكسل). بالإضافة إلى ذلك، يختار وحدة DyHead ديناميكيًا رؤوس الاكتشاف بناءً على ميزات الأجسام، مما يحسن دقة الاكتشاف عبر مقاييس مختلفة. تختتم الورقة بأن نموذج CPDD-YOLOv8 يعزز بشكل كبير أداء اكتشاف الأجسام الصغيرة، مما يجعله مناسبًا للتطبيقات العملية في مجالات مثل المراقبة الذكية والقيادة الذاتية.
DOI: https://doi.org/10.1038/s41598-024-84938-4
PMID: https://pubmed.ncbi.nlm.nih.gov/39755781
Publication Date: 2025-01-04
Author(s): Jingyang Wang et al.
Primary Topic: Advanced Neural Network Applications
Overview
The research presents the CPDD-YOLOv8 model, designed to enhance small object detection in aerial images, which often pose challenges due to their high altitude and the presence of numerous small objects that are difficult to discern. The model incorporates several innovative structures: the C2fGAM structure integrates a Global Attention Mechanism (GAM) into the C2f backbone to improve semantic understanding; a new detection layer, P2, is introduced to capture shallow features; and the DSC2f structure replaces the standard convolution in the Bottleneck with Dynamic Snake Convolution (DSConv) to better adapt to varying inputs. Additionally, the Dynamic Head (DyHead) employs multiple attention mechanisms to assign weights to different feature layers.
Experimental results demonstrate the efficacy of CPDD-YOLOv8, achieving a mean Average Precision (mAP) of 41% at IoU threshold 0.5, surpassing the performance of seven comparative models, including a 6.9% improvement over YOLOv8. The model’s small object detection rate is enhanced by 13.1%, and its generalizability is validated across multiple datasets, including WiderPerson and VOC_MASK. While the CPDD-YOLOv8 significantly improves detection accuracy, the authors acknowledge the need for further optimization to reduce model size and enhance deployment feasibility, indicating future research directions focused on balancing accuracy and computational efficiency.
Methods
The research utilizes the VisDrone2019 dataset, which encompasses a diverse range of conditions across 14 regions in China, including both rural and urban environments. This dataset comprises 10 distinct categories: pedestrian, people, car, van, bus, truck, motor, bicycle, awning-tricycle, and tricycle. For the experiments, a total of 6,471 images are allocated for training, 548 for verification, and 1,610 for testing. The VisDrone2019 dataset is publicly accessible and can be downloaded from the provided GitHub link.
Discussion
The discussion section of the research paper highlights advancements in object detection algorithms, categorizing them into one-stage and two-stage methods. Notable improvements in models like YOLOv3 and YOLOv5 are discussed, emphasizing enhancements in resolution and feature extraction capabilities. For instance, Huang et al. improved YOLOv3 by increasing input resolution and adding feature mapping layers, while Zhao et al. integrated MobileNetv3 into YOLOv5 to enhance feature extraction, albeit at the cost of mean Average Precision (mAP). The section also addresses the limitations of existing models, particularly in complex environments or when detecting small objects, underscoring the need for further research to enhance robustness and performance.
The proposed CPDD-YOLOv8 model aims to address these limitations by introducing innovative structures such as the C2fGAM and P2 detection layers, which enhance the model’s ability to detect small objects in complex scenes. The C2fGAM structure improves feature sensitivity, while the P2 layer allows for the detection of even smaller objects (4×4 pixels). Additionally, the DyHead module dynamically selects detection heads based on object features, further improving detection accuracy across varying scales. The paper concludes that the CPDD-YOLOv8 model significantly enhances small object detection performance, making it suitable for practical applications in fields like intelligent monitoring and autonomous driving.
