الكشف عن اضطراب طيف التوحد باستخدام الصور الوجهية: مقارنة أداء الشبكات العصبية التلافيفية المدربة مسبقًا
Autism spectrum disorder detection using facial images: A performance comparison of pretrained convolutional neural networks

شارك:
المجلة: Healthcare Technology Letters، المجلد: 11، العدد: 4
DOI: https://doi.org/10.1049/htl2.12073
PMID: https://pubmed.ncbi.nlm.nih.gov/39100502
تاريخ النشر: 2024-01-08
المؤلف: Israr Ahmad وآخرون
الموضوع الرئيسي: البحث في اضطراب طيف التوحد

نظرة عامة

تبحث الورقة البحثية في تطبيق الشبكات العصبية التلافيفية المدربة مسبقًا (CNNs) لاكتشاف اضطراب طيف التوحد (ASD)، وهو حالة نفسية معقدة تتميز بالتحديات في التفاعل الاجتماعي والتواصل. تسلط الدراسة الضوء على التباين في أعراض ASD وتؤكد على أهمية الكشف المبكر لتحسين النتائج التنموية. تم استخدام هياكل CNN المختلفة، بما في ذلك ResNet34 و ResNet50 و AlexNet و MobileNetV2 و VGG16 و VGG19، مع تطبيق التعلم بالنقل لتعزيز الأداء. من بين هذه النماذج، حقق نموذج ResNet50 أعلى دقة بنسبة 92%، متجاوزًا النماذج الأخرى ومظهرًا أداءً متفوقًا من حيث الدقة والكفاءة الحسابية.

تشير الاستنتاجات المستخلصة من الدراسة إلى أنه يمكن تكييف النماذج المدربة مسبقًا بفعالية لاكتشاف ASD، حتى مع بيانات تدريب محدودة. استكشفت التحليل عوامل مثل العلاقة بين دقة النموذج، وعدد الطبقات، ومعلمات التعلم، وكشفت أن النماذج التي تحتوي على 34 و 50 طبقة أدت أداءً أفضل من تلك التي تحتوي على أكثر من 53 طبقة، مثل MobileNetV2. تشير النتائج إلى أن الميزات التي تم تعلمها من التدريب المسبق قابلة للنقل إلى مهمة اكتشاف ASD، مما يسمح بدقة عالية مع عدد أقل من عينات التدريب وسرعة تقارب النموذج. يقترح المؤلفون تطوير تطبيق موبايل يعتمد على نموذج ResNet50 لتسهيل اكتشاف ASD في العمل المستقبلي.

مقدمة

تسلط مقدمة الورقة البحثية الضوء على الزيادة المتزايدة في انتشار اضطراب طيف التوحد (ASD)، وهو حالة عصبية تنموية معقدة تتميز بالتحديات في التفاعل الاجتماعي، والتواصل، والسلوكيات المتكررة. لقد ارتفعت نسبة حدوث ASD بشكل كبير، مع تقديرات تشير إلى أن 1 من كل 44 طفلًا أمريكيًا يتم تشخيصه، وتؤثر الحالة على الأفراد عبر مختلف الفئات السكانية. على الرغم من عدم وجود علاج نهائي، فإن التشخيص المبكر أمر حاسم للتخفيف من تأثير الاضطراب وتحسين جودة الحياة للأفراد المتأثرين. يتم الإشارة إلى العوامل الوراثية والبيئية في مسببات ASD، مع ارتباط عدة طفرات جينية بالاضطراب.

تؤكد الورقة على أهمية الكشف المبكر، حيث يمكن أن تعزز التدخلات في الوقت المناسب النتائج التنموية وتقلل من تكاليف الرعاية طويلة الأجل، والتي من المتوقع أن ترتفع بشكل كبير. تعتمد الممارسات التشخيصية الحالية على الاستبيانات النفسية والملاحظات السريرية بسبب غياب الاختبارات السريرية الموضوعية. تناقش المقدمة أيضًا إمكانيات تقنيات التعلم الآلي (ML) والتعلم العميق (DL) في تشخيص ASD، مشيرة إلى أن هذه الطرق قد تتجاوز طرق التقييم التقليدية من خلال تحليل الخصائص السلوكية والبدنية الدقيقة. تهدف الدراسة إلى الاستفادة من الشبكات العصبية التلافيفية المدربة مسبقًا لتحليل الصور الوجهية من مجموعة بيانات، مما يساهم في تطوير أدوات تشخيصية آلية لاضطراب ASD.

الطرق

تقدم الدراسة منهجية للكشف المبكر عن اضطراب طيف التوحد (ASD) باستخدام الصور الوجهية، والتي تُسمى اكتشاف اضطراب طيف التوحد باستخدام الصور الوجهية (ASD-DFI). تعتمد هذه الطريقة على ستة نماذج معروفة من الشبكات العصبية التلافيفية المدربة مسبقًا—ResNet34 و ResNet50 و VGG16 و VGG19 و AlexNet و MobileNetV2—مستفيدة من التعلم بالنقل (TL) لمعالجة تحدي الحاجة إلى مجموعات بيانات كبيرة للتدريب. من خلال استخدام النماذج المدربة مسبقًا، تهدف الدراسة إلى تعزيز الأداء مع تقليل الحاجة إلى بيانات موسومة واسعة النطاق. تم تدريب النماذج على مجموعة بيانات صور ASD بأحجام صور مختلفة (124 × 124 و 248 × 248 بكسل) لاستكشاف تأثير دقة الصورة على فعالية الكشف.

شمل عملية التدريب ثلاث دفعات من العصور، مع خمس عصور أولية تليها معدل تعلم انتقائي لسبع عصور إضافية، حيث تم تجميد معظم الطبقات. تلا ذلك تدريب غير مجمد لثماني عصور، مما يسمح بالتعلم الشامل والتعديل الدقيق. تؤكد المنهجية على أهمية التعرف على السمات البصرية المرتبطة بالتوحد، مثل تعبيرات الوجه، وأنماط نظرات العين، ولغة الجسد، والتي تعتبر حاسمة للتصنيف الدقيق. تلتزم الدراسة بالمعايير الأخلاقية في تصنيف البيانات البصرية، وتهدف إلى تحديد النموذج الأكثر فعالية للكشف المبكر عن ASD بناءً على الصور التي تم تحليلها. يتم تفصيل بنية كل شبكة مدربة مسبقًا وتعقيدها، بما في ذلك عدد الطبقات والمعلمات، لإبلاغ اختيار النموذج الأمثل لهذه المهمة.

النتائج

تشير نتائج الدراسة حول اكتشاف اضطراب طيف التوحد (ASD) باستخدام نماذج التعلم العميق المختلفة إلى أن طريقة ASD-DFI المقترحة تُظهر وعدًا كبيرًا. تضمنت الإعدادات التجريبية تدريب 90% من البيانات مع الاحتفاظ بـ 10% للاختبار، وتم تقييم النماذج بناءً على الدقة. كشفت النتائج الأولية أن جميع النماذج حققت درجات دقة تتجاوز 75%، حيث كانت عائلة ResNet، وخاصة ResNet34 و ResNet50، تؤدي بشكل ملحوظ، محققة درجات دقة قصوى تبلغ 80% خلال العصور التدريبية المبكرة. كما أظهرت نماذج VGG16 و VGG19 أداءً تنافسيًا، مع درجات دقة تبلغ 78% و 80%، على التوالي.

عند التدريب الإضافي باستخدام معدل تعلم مخصص، حقق نموذج ResNet50 درجة دقة مثيرة للإعجاب تزيد عن 92% عند دقة 248 × 248، متفوقًا على جميع النماذج الأخرى. تلا ذلك نموذج ResNet34 بدرجة دقة تبلغ 86% عند نفس الدقة. بالمقابل، حققت نماذج VGG درجات دقة قصوى تبلغ 80% و 86%، بينما حافظت AlexNet و MobileNetV2 على مستويات أداء أقل. تؤكد هذه النتائج على تفوق نموذج ResNet50 في اكتشاف ASD في مرحلة الطفولة المبكرة، مما يشير إلى إمكانيته كأداة موثوقة في الإعدادات السريرية.

المناقشة

في قسم المناقشة، تستعرض الورقة التقدمات الأخيرة في تحليل تعبيرات الوجه بين الأفراد المصابين باضطراب طيف التوحد (ASD) وتسلط الضوء على منهجيات مختلفة تم استخدامها لتعزيز التعرف على المشاعر في هذه الفئة. بشكل ملحوظ، استخدم Yolcu وآخرون الشبكات العصبية التلافيفية (CNNs) لتحديد الميزات الوجهية المرتبطة بـ ASD، محققين دقة توقع تبلغ 94.44%. استكشفت دراسات أخرى، مثل تلك التي أجراها Guha وآخرون وGrossard وآخرون، قدرات التعبير العاطفي للأطفال المصابين بـ ASD وطورت أدوات تعليمية لتسهيل الفهم العاطفي. أظهرت دمج تقنيات التعلم العميق وعدًا في تحسين دقة التشخيص، حيث حققت النماذج درجات نجاح متفاوتة، مثل دقة 75.2% من مجموعة حديثة من CNN العميق.

تتناول الورقة أيضًا مجموعة البيانات المستخدمة في الدراسة، والتي تتكون من 2,940 صورة متوازنة لأفراد مصابين وغير مصابين بالتوحد، تمت معالجتها من خلال عدة تقنيات بما في ذلك تغيير الحجم، والتدوير، والتطبيع لتعزيز أداء النموذج. أظهر نموذج ResNet50 المقترح لاكتشاف ASD تحسينات كبيرة، محققًا متوسط دقة يبلغ 92% وتفوق على النماذج الموجودة في هذا المجال. أشارت مقاييس التقييم، بما في ذلك الدقة، والاسترجاع، ودرجة F1، إلى أداء قوي دون علامات على الإفراط في التكيف أو نقص التكيف. تؤكد النتائج على إمكانيات النماذج المدربة مسبقًا في اكتشاف ASD، مما يشير إلى أن هذه الأطر يمكن تكييفها بفعالية للتطبيقات السريرية، مما يمهد الطريق لتطورات مستقبلية مثل التطبيقات المحمولة للتشخيص المبكر.

Journal: Healthcare Technology Letters, Volume: 11, Issue: 4
DOI: https://doi.org/10.1049/htl2.12073
PMID: https://pubmed.ncbi.nlm.nih.gov/39100502
Publication Date: 2024-01-08
Author(s): Israr Ahmad et al.
Primary Topic: Autism Spectrum Disorder Research

Overview

The research paper investigates the application of pre-trained convolutional neural networks (CNNs) for the detection of autism spectrum disorder (ASD), a complex psychological condition marked by challenges in social interaction and communication. The study highlights the variability in ASD symptoms and emphasizes the importance of early detection for improving developmental outcomes. Various CNN architectures, including ResNet34, ResNet50, AlexNet, MobileNetV2, VGG16, and VGG19, were employed, with transfer learning applied to enhance performance. Among these, the ResNet50 model achieved the highest accuracy of 92%, surpassing other models and demonstrating superior performance in terms of both accuracy and computational efficiency.

The conclusions drawn from the study indicate that pre-trained models can be effectively adapted for ASD detection, even with limited training data. The analysis explored factors such as the relationship between model resolution, the number of layers, and learning parameters, revealing that models with 34 and 50 layers performed better than those with more than 53 layers, like MobileNetV2. The findings suggest that the features learned from pre-training are transferable to the task of ASD detection, allowing for high accuracy with fewer training samples and faster model convergence. The authors propose the development of a mobile application based on the ResNet50 model to facilitate ASD detection in future work.

Introduction

The introduction of the research paper highlights the increasing prevalence of autism spectrum disorder (ASD), a complex neurodevelopmental condition characterized by challenges in social interaction, communication, and repetitive behaviors. The incidence of ASD has risen significantly, with estimates indicating that 1 in 44 American children are diagnosed, and the condition affects individuals across various demographics. Despite the lack of a definitive cure, early diagnosis is crucial for mitigating the disorder’s impact and improving the quality of life for affected individuals. Genetic and environmental factors are implicated in ASD’s etiology, with multiple gene mutations linked to the disorder.

The paper emphasizes the importance of early detection, as timely interventions can enhance developmental outcomes and reduce long-term care costs, which are projected to rise significantly. Current diagnostic practices rely on psychological questionnaires and clinical observations due to the absence of objective clinical tests. The introduction also discusses the potential of machine learning (ML) and deep learning (DL) techniques in diagnosing ASD, noting that these methods could surpass traditional evaluation methods by analyzing subtle behavioral and physical characteristics. The study aims to leverage pre-trained convolutional neural networks to analyze facial images from a dataset, contributing to the development of automated diagnostic tools for ASD.

Methods

The study presents a methodology for early detection of autism spectrum disorder (ASD) using facial images, termed Autism Spectrum Disorder Detection using Facial Images (ASD-DFI). This approach employs six well-established pre-trained convolutional neural network (CNN) models—ResNet34, ResNet50, VGG16, VGG19, AlexNet, and MobileNetV2—leveraging transfer learning (TL) to address the challenge of requiring large datasets for training. By utilizing pre-trained models, the study aims to enhance performance while minimizing the need for extensive labeled data. The models were trained on an ASD image dataset with varying image sizes (124 × 124 and 248 × 248 pixels) to explore the impact of image resolution on detection efficacy.

The training process involved three batches of epochs, with an initial five epochs followed by a selective learning rate for an additional seven epochs, during which most layers were frozen. This was succeeded by unfrozen training for eight epochs, allowing for thorough learning and fine-tuning. The methodology emphasizes the importance of recognizing visual traits associated with autism, such as facial expressions, eye gaze patterns, and body language, which are critical for accurate classification. The study adheres to ethical standards in visual data classification, aiming to identify the most effective model for early ASD detection based on the analyzed images. Each pre-trained network’s architecture and complexity, including the number of layers and parameters, are detailed to inform the selection of the optimal model for this task.

Results

The results of the study on detecting autism spectrum disorder (ASD) using various deep learning models indicate that the proposed ASD-DFI method demonstrates significant promise. The experimental setup involved training 90% of the data while reserving 10% for testing, with models evaluated based on accuracy. Initial findings revealed that all models achieved accuracy scores exceeding 75%, with the ResNet family, particularly ResNet34 and ResNet50, performing notably well, achieving maximum accuracy scores of 80% during early training epochs. The VGG16 and VGG19 models also showed competitive performance, with accuracy scores of 78% and 80%, respectively.

Upon further training with a custom learning rate, the ResNet50 model achieved an impressive accuracy score of over 92% at a resolution of 248 × 248, outperforming all other models. The ResNet34 model followed closely with an accuracy of 86% at the same resolution. In contrast, the VGG models reached maximum accuracy scores of 80% and 86%, while AlexNet and MobileNetV2 maintained lower performance levels. These results underscore the superiority of the ResNet50 model for ASD detection in early childhood, suggesting its potential as a reliable tool in clinical settings.

Discussion

In the discussion section, the paper reviews recent advancements in the analysis of facial expressions among individuals with Autism Spectrum Disorder (ASD) and highlights various methodologies employed to enhance emotion recognition in this population. Notably, Yolcu et al. utilized convolutional neural networks (CNNs) to identify facial features associated with ASD, achieving a prediction accuracy of 94.44%. Other studies, such as those by Guha et al. and Grossard et al., explored the emotional expression capabilities of children with ASD and developed educational tools to facilitate emotional understanding. The integration of deep learning techniques has shown promise in improving diagnostic accuracy, with models achieving varying degrees of success, such as a 75.2% accuracy from a recent deep CNN ensemble.

The paper also details the dataset used for the study, which comprises 2,940 balanced images of autistic and non-autistic individuals, processed through several techniques including resizing, flipping, and normalization to enhance model performance. The proposed ResNet50 model for ASD detection demonstrated significant improvements, achieving an average accuracy of 92% and outperforming existing models in the field. The evaluation metrics, including precision, recall, and F1-score, indicated robust performance without signs of overfitting or underfitting. The findings underscore the potential of pre-trained models in ASD detection, suggesting that these frameworks can be effectively adapted for clinical applications, paving the way for future developments such as mobile applications for early diagnosis.