DOI: https://doi.org/10.1016/j.jmapro.2026.04.020
تاريخ النشر: 2026-04-15
المؤلف: Ruo-Syuan Mei وآخرون
الموضوع الرئيسي: أنظمة الرؤية الصناعية واكتشاف العيوب
نظرة عامة
تقدم البحث إطار عمل هجين لتوليد البيانات الاصطناعية (SDG) يهدف إلى تعزيز تطبيقات التعلم الآلي في فحص الجودة الصناعية. تواجه الطرق التقليدية تحديات بسبب الحاجة إلى كميات كبيرة من البيانات المصنفة عالية الجودة، والتي غالبًا ما يكون من الصعب الحصول عليها، خاصةً بالنسبة للعينات المعيبة النادرة التي تؤدي إلى عدم توازن الفئات. يستخدم إطار عمل SDG المقترح تقنية العرض المعتمد على المحاكاة، وتوزيع المجال، وتركيب الخلفيات الحقيقية لتوليد مجموعات بيانات كبيرة ومتوازنة ومشروحة بكفاءة. على وجه التحديد، يمكن للإطار إنتاج 12,960 صورة مصنفة في ساعة واحدة فقط من خلال تغيير معلمات مثل هندسة الأجزاء، والإضاءة، وخصائص السطح.
تستخدم الدراسة بنية من مرحلتين تدمج هيكل YOLOv8n لاكتشاف الأجسام وMobileNetV3-small لتصنيف الجودة، تم تدريبها فقط على البيانات الاصطناعية. تظهر النتائج أداءً استثنائيًا، حيث تحقق متوسط دقة (mAP) يبلغ 0.995 للاكتشاف، و96% دقة تصنيف، و90.1% دقة متوازنة عند تقييمها على 300 جزء صناعي حقيقي. من الجدير بالذكر أن نموذج SDG يتفوق على معايير البيانات الحقيقية القليلة، حيث يحقق دقة متوازنة تتراوح بين 90-91% تحت عدم توازن شديد في الفئات، مقارنةً بـ 50% فقط للمعايير. تشير النتائج إلى أن الطريقة المقترحة تسهل فحص الجودة بدون الحاجة للتعليق، وقابلة للتوسع، وموثوقة، مما يجعلها حلاً قابلاً للتطبيق لتطبيقات التصنيع في العالم الحقيقي وقابلة للتوسيع لتشمل مهام الفحص البصري الأخرى.
مقدمة
تسلط مقدمة الورقة الضوء على أهمية فحص الجودة البصرية في التصنيع، مشددة على دورها في ضمان سلامة المنتج، والدقة الهندسية، والكفاءة التشغيلية. يتم انتقاد الطرق التقليدية، مثل الفحص اليدوي وأنظمة الرؤية المعتمدة على القواعد، بسبب طبيعتها التي تتطلب الكثير من العمل، وعدم اتساقها، وقابليتها للخطأ البشري. بينما تكتسب أنظمة الفحص الآلي زخمًا، إلا أنها غالبًا ما تعاني من معدلات إنذار كاذب عالية وفقدان اكتشافات، ويرجع ذلك أساسًا إلى قيود الأساليب المعتمدة على البيانات الحالية. ظهرت رؤية الكمبيوتر المعتمدة على التعلم العميق كبديل واعد، ومع ذلك، لا يزال تحدي الحصول على مجموعات بيانات مصنفة كبيرة وعالية الجودة يشكل حاجزًا كبيرًا أمام التبني الصناعي الواسع النطاق.
لمعالجة هذه العقبة في البيانات، تقدم الورقة توليد البيانات الاصطناعية (SDG) كحل قابل للتطبيق، قادر على إنتاج مجموعات بيانات متوازنة على نطاق واسع لتدريب نماذج قوية. على الرغم من إمكانيات SDG، فإن “فجوة المحاكاة إلى الواقع” تمثل تحديًا، حيث تكافح النماذج المدربة على البيانات الاصطناعية غالبًا للتعميم على الظروف الواقعية. يقترح المؤلفون إطار عمل هجين لـ SDG يدمج العرض المعتمد على المحاكاة، وتوزيع المجال، وتركيب الخلفيات الحقيقية لتعزيز واقعية الصور الاصطناعية. يتيح هذا النهج توليد 12,960 صورة مشروحة بدون الحاجة للتعليق اليدوي ويظهر مقاييس أداء مثيرة للإعجاب، بما في ذلك متوسط دقة (mAP) يبلغ 0.995 ودقة متوازنة تبلغ 90.1% على البيانات الحقيقية، حتى تحت عدم توازن شديد في الفئات. توضح الورقة مساهماتها وتضع الأساس للأقسام التالية التي تفصل المنهجية، والنتائج التجريبية، واتجاهات البحث المستقبلية.
طرق
تحدد قسم الطرق نهجًا شاملاً لمعالجة عيوب اللحام في دعامة صناعية تستخدم في تجميع السيارات. تتكون المنهجية المقترحة من ثلاثة مكونات رئيسية: (1) خط أنابيب هجين لتوليد البيانات الاصطناعية (SDG) مصمم لإنتاج بيانات اصطناعية مع تعليقات تلقائية لتدريب النماذج بشكل فعال، (2) تدريب نموذج YOLOv8n لاكتشاف الأجزاء، و(3) تدريب نموذج MobileNetV3-small لتصنيف النتائج كنجاح أو فشل.
تركز الدراسة بشكل خاص على انحناء علامة التبويب العلوية للدعامة، والتي يمكن أن تؤدي إلى عيوب لحام مثل اللحامات المفقودة أو الحواف، مما يؤثر في النهاية على سلامة عمليات التجميع اللاحقة. تُستخدم صور توضيحية للدعامة في جميع أنحاء القسم لتوضيح المنهجية. من المهم أن تكون الطريقة المقترحة مصممة لتكون قابلة للتوسع، مما يسمح بتطبيقها على مهام فحص بصرية مشابهة أخرى.
نتائج
يقدم قسم “النتائج” في ورقة البحث النتائج المستمدة من التجارب والتحليلات التي تم إجراؤها. تشمل النتائج الرئيسية بيانات ذات دلالة إحصائية تدعم الفرضيات الموضحة في المقدمة. يتم توضيح النتائج من خلال أشكال وجداول متنوعة، والتي توفر تمثيلًا واضحًا للاتجاهات والأنماط الملاحظة.
بالإضافة إلى ذلك، يناقش القسم تداعيات هذه النتائج فيما يتعلق بالأدبيات الموجودة، مشددًا على كيفية مساهمتها في الفهم الأوسع للموضوع. يتم الإبلاغ عن مقاييس محددة، مثل قيم p وفترات الثقة، لدعم صحة النتائج. بشكل عام، تؤكد النتائج على أهمية البحث وتقترح طرقًا محتملة للتحقيق في المستقبل.
مناقشة
يعالج خط أنابيب SDG الهجين المقدم في هذا البحث بشكل فعال التحديات المتعلقة بتوليد مجموعات بيانات تدريب مشروحة لفحص الأجزاء الصناعية من خلال دمج العرض المعتمد على المحاكاة مع الخلفيات الواقعية. يخفف هذا النهج من فجوة المحاكاة إلى الواقع الموجودة في الأساليب الاصطناعية البحتة، مما يسمح بالحفاظ على الدقة الهندسية مع دمج تعقيدات المظاهر الواقعية. يتكون خط الأنابيب من ثلاث مراحل: عرض الأجزاء مع توزيع المجال، واستخراج الخلفيات من الصور الحقيقية، وأتمتة توليد التعليقات. أدت هذه الأتمتة إلى إنشاء سريع لـ 12,960 صورة مشروحة بالكامل، محققة مجموعة بيانات متوازنة من تصنيفات النجاح والفشل.
أظهر أداء نموذج YOLOv8n، الذي تم تحسينه باستخدام خط أنابيب SDG الهجين، تحسينات كبيرة في مقاييس اكتشاف الأجسام، حيث حقق متوسط دقة (mAP) يبلغ 0.995 ودقة تبلغ 0.996، مع الحفاظ على استرجاع مثالي. وبالمثل، حقق نموذج MobileNetV3-small لتصنيف الثنائي دقة إجمالية تبلغ 96% على الصور الحقيقية، مما يظهر قوة النموذج حتى تحت ظروف عدم توازن الفئات. تفوق نموذج SDG باستمرار على معايير التعلم القليل، مما يدل على فعاليته في السيناريوهات التي تحتوي على بيانات حقيقية محدودة. سلط تحليل الأخطاء الضوء على التحديات المتعلقة بحالات الحدود وظروف الإضاءة، مما يشير إلى مجالات للتحسين في المستقبل. بشكل عام، توضح هذه الدراسة إمكانيات إطار عمل SDG الهجين لتسهيل أنظمة الفحص البصرية القابلة للتوسع وبدون تعليق في التصنيع، مما يمهد الطريق لتطبيقات أوسع في مراقبة الجودة.
القيود
تسلط القيود المفروضة على نهج SDG الهجين المقترح لفحص الصناعة الضوء على عدة مجالات للبحث المستقبلي. أولاً، تقتصر عملية التحقق من صحة الطريقة على هندسة جزء واحد وتكوين فحص واحد، مما يتطلب مزيدًا من الاستكشاف لضمان القابلية للتعميم عبر أنواع أجزاء مختلفة، وملمس السطح، وإعدادات المستشعر. ثانيًا، تعتمد استراتيجية توزيع المجال على الافتراض بأن الظروف البيئية ستظل ضمن نطاقات المعلمات المستكشفة، مما قد يؤدي إلى تدهور الأداء في ظروف مختلفة بشكل كبير. بالإضافة إلى ذلك، بينما يعد إنشاء مجموعة بيانات اصطناعية أقل كثافة في العمل من التعليق على البيانات الحقيقية، إلا أنه لا يزال يتطلب موارد حسابية كبيرة وخبرة في المحاكاة.
لمعالجة هذه القيود، يمكن أن تركز الأعمال المستقبلية على عدة مجالات رئيسية: (1) سد الفجوة بين المحاكاة والواقع من خلال التكيف مع المجال باستخدام مزيج من البيانات الاصطناعية والحقيقية، (2) التحقق من خط أنابيب SDG عبر مجموعة أوسع من الأجزاء وعمليات التصنيع لتقييم قدرات التعميم، (3) تطوير استراتيجيات توزيع المجال التكيفية التي تدمج التغذية الراجعة من العالم الحقيقي لتعزيز التنوع الاصطناعي، (4) دمج التعزيزات التوليدية المتعلمة لنمذجة الظواهر المعقدة مثل الانعكاسات اللامعة بشكل فعال، و(5) توسيع المنهجية لاستيعاب تقييمات العيوب متعددة الفئات والدقيقة. ستوفر التقييمات الشاملة مقابل مجموعة أوسع من تقنيات التكيف مع المجال، مثل الشبكات المعادية للمجال والتعلم الذاتي، سياقًا قيمًا لفعالية النهج المقترح.
DOI: https://doi.org/10.1016/j.jmapro.2026.04.020
Publication Date: 2026-04-15
Author(s): Ruo-Syuan Mei et al.
Primary Topic: Industrial Vision Systems and Defect Detection
Overview
The research presents a hybrid synthetic data generation (SDG) framework aimed at enhancing machine learning applications in industrial quality inspection. Traditional methods face challenges due to the need for large volumes of high-quality labeled data, which are often difficult to obtain, especially for rare defective samples that lead to class imbalance. The proposed SDG framework utilizes simulation-based rendering, domain randomization, and real background compositing to generate large, balanced, and annotated datasets efficiently. Specifically, the framework can produce 12,960 labeled images in just one hour by varying parameters such as part geometry, lighting, and surface properties.
The study employs a two-stage architecture that integrates a YOLOv8n backbone for object detection and MobileNetV3-small for quality classification, trained solely on synthetic data. The results demonstrate exceptional performance, achieving a mean Average Precision (mAP) of 0.995 for detection, 96% classification accuracy, and 90.1% balanced accuracy when evaluated on 300 real industrial parts. Notably, the SDG model outperforms few-shot real-data baselines, achieving balanced accuracies of 90-91% under severe class imbalance, compared to only 50% for the baselines. The findings indicate that the proposed method facilitates annotation-free, scalable, and robust quality inspection, making it a viable solution for real-world manufacturing applications and extendable to other visual inspection tasks.
Introduction
The introduction of the paper highlights the significance of visual quality inspection in manufacturing, emphasizing its role in ensuring product integrity, geometric accuracy, and operational efficiency. Traditional methods, such as manual inspection and rule-based vision systems, are criticized for their labor-intensive nature, inconsistency, and susceptibility to human error. While automated inspection systems are gaining traction, they often suffer from high false alarm rates and missed detections, primarily due to the limitations of existing data-driven approaches. Deep learning-based computer vision has emerged as a promising alternative, yet the challenge of acquiring large, high-quality annotated datasets remains a significant barrier to widespread industrial adoption.
To address this data bottleneck, the paper introduces synthetic data generation (SDG) as a viable solution, capable of producing large-scale, balanced datasets for training robust models. Despite the potential of SDG, the “sim-to-real gap” poses a challenge, as models trained on synthetic data often struggle to generalize to real-world conditions. The authors propose a hybrid SDG framework that integrates simulation-based rendering, domain randomization, and real background compositing to enhance the realism of synthetic images. This approach enables the generation of 12,960 annotated images without manual labeling and demonstrates impressive performance metrics, including a mean average precision (mAP) of 0.995 and a balanced accuracy of 90.1% on real data, even under severe class imbalances. The paper outlines its contributions and sets the stage for subsequent sections that detail the methodology, experimental results, and future research directions.
Methods
The methods section outlines a comprehensive approach to addressing weld defects in an industrial bracket used in automotive assembly. The proposed methodology consists of three primary components: (1) a hybrid Synthetic Data Generation (SDG) pipeline designed to produce synthetic data with automatic annotations for effective model training, (2) the training of a YOLOv8n model for part detection, and (3) the training of a MobileNetV3-small model for classifying outcomes as pass or fail.
The study specifically focuses on the bending of the top tab of the bracket, which can lead to weld defects such as missed or edge welds, ultimately affecting the integrity of subsequent assembly processes. Illustrative example images of the bracket are utilized throughout the section to clarify the methodology. Importantly, the proposed method is designed to be extensible, allowing its application to other similar vision-based inspection tasks.
Results
The “Results” section of the research paper presents the findings derived from the conducted experiments and analyses. Key outcomes include statistically significant data that support the hypotheses outlined in the introduction. The results are illustrated through various figures and tables, which provide a clear representation of the trends and patterns observed.
Additionally, the section discusses the implications of these findings in relation to existing literature, highlighting how they contribute to the broader understanding of the subject matter. Specific metrics, such as p-values and confidence intervals, are reported to substantiate the validity of the results. Overall, the findings underscore the importance of the research and suggest potential avenues for future investigation.
Discussion
The hybrid SDG pipeline presented in this research effectively addresses the challenges of generating annotated training datasets for industrial part inspection by combining simulation-based rendering with real-world backgrounds. This approach mitigates the sim-to-real gap inherent in purely synthetic methods, allowing for the preservation of geometric accuracy while incorporating the complexities of real-world appearances. The pipeline consists of three stages: rendering parts with domain randomization, extracting backgrounds from real images, and automating annotation generation. This automation resulted in the rapid creation of 12,960 fully-annotated images, achieving a balanced dataset of pass and fail classifications.
The performance of the YOLOv8n model, fine-tuned using the hybrid SDG pipeline, demonstrated significant improvements in object detection metrics, achieving a mean Average Precision (mAP) of 0.995 and a precision of 0.996, while maintaining perfect recall. Similarly, the MobileNetV3-small model for binary classification achieved an overall accuracy of 96% on real images, showcasing the model’s robustness even under class imbalance conditions. The SDG model consistently outperformed few-shot learning baselines, indicating its effectiveness in scenarios with limited real data. Error analysis highlighted challenges related to boundary cases and lighting conditions, suggesting areas for future refinement. Overall, this research illustrates the potential of the hybrid SDG framework to facilitate scalable, annotation-free visual inspection systems in manufacturing, paving the way for broader applications in quality control.
Limitations
The limitations of the proposed hybrid Stochastic Domain Generalization (SDG) approach for industrial inspection highlight several areas for future research. Firstly, the validation of the method is confined to a single part geometry and inspection configuration, necessitating further exploration to ensure generalizability across various part types, surface textures, and sensor setups. Secondly, the domain randomization strategy relies on the assumption that environmental conditions will remain within the explored parameter ranges, which could lead to performance degradation in significantly different conditions. Additionally, while synthetic dataset creation is less labor-intensive than real data annotation, it still demands substantial computational resources and simulation expertise.
To address these limitations, future work could focus on several key areas: (1) bridging the simulation-to-real gap through domain adaptation using a mix of synthetic and real data, (2) validating the SDG pipeline across a wider array of parts and manufacturing processes to evaluate generalization capabilities, (3) developing adaptive domain randomization strategies that incorporate real-world feedback to enhance synthetic diversity, (4) integrating learned generative enhancements to effectively model complex phenomena such as specular reflections, and (5) extending the methodology to accommodate multi-class and fine-grained defect assessments. Comprehensive evaluations against a broader range of domain adaptation techniques, such as domain-adversarial networks and self-supervised learning, would also provide valuable context for the effectiveness of the proposed approach.
