DOI: https://doi.org/10.1002/nme.70307
تاريخ النشر: 2026-03-17
المؤلف: Zhequan Shen وآخرون
الموضوع الرئيسي: تقليل النماذج والشبكات العصبية
نظرة عامة
في هذا البحث، يقدم المؤلفون “MAE-TransNet”، وهو نهج جديد للشبكات العصبية مصمم لحل مشاكل الاضطراب الفردي بشكل فعال، والتي تتميز بتدرجات حادة في طبقات الحدود الضيقة. من خلال الاستفادة من نظرية التوسعات المتناظرة المتطابقة (MAEs)، يقوم الأسلوب بتفكيك المشكلة الأصلية إلى مشكلات قيمة حدود داخلية وخارجية. يتم تقريب الحل الخارجي باستخدام TransNet مع خلايا عصبية في الطبقة المخفية متجانسة، بينما يستخدم الحل الداخلي TransNet مع خلايا عصبية في الطبقة المخفية غير متجانسة. ثم يتم استخدام مصطلح المطابقة لدمج هذه الحلول في حل مركب يكون صالحًا بشكل موحد عبر المجال الحسابي.
لا يحتفظ أسلوب MAE-TransNet فقط بدقة التوسعات المتناظرة المتطابقة التقليدية، بل يعزز أيضًا الكفاءة الحسابية، كما يتضح من خلال مقارنات عددية واسعة مع تقنيات الشبكات العصبية الأخرى، بما في ذلك TransNet، والشبكات العصبية المستندة إلى الفيزياء (PINN)، وBoundary-Layer PINN (BL-PINN). تشير النتائج إلى أن MAE-TransNet يتفوق بشكل كبير على هذه الأساليب في التقاط خصائص طبقة الحدود بدقة مع تقليل التكاليف الحسابية. علاوة على ذلك، فإن قدرة الأسلوب على تطبيق نفس المعلمات المدربة مسبقًا عبر طبقات الحدود ذات السماكات المختلفة تبرز قابليته للنقل. يقترح المؤلفون أن العمل المستقبلي يمكن أن يركز على تحليل التقارب النظري الدقيق وتقديرات الخطأ للتحقق من أداء الأسلوب بشكل أكبر.
مقدمة
تتناول مقدمة هذه الورقة البحثية التحديات المرتبطة بمشاكل الاضطراب الفردي التي تتميز بطبقات حدود رقيقة، والتي تنشأ في مجالات متنوعة مثل ديناميكا السوائل، وعلم الأحياء الرياضي، وانتقال الحرارة. يبرز المؤلفون الصعوبات في حل هذه المشاكل بدقة بسبب التدرجات الكبيرة داخل طبقات الحدود، مما يتطلب شبكات متجانسة كثيفة تؤدي إلى تكاليف حسابية مرتفعة. تكافح الطرق العددية التقليدية، بما في ذلك طرق الفروق المحدودة وطرق العناصر المحدودة، مع معلمات الاضطراب الصغيرة جدًا، مما يدفع لاستكشاف أساليب الشبكات العصبية مثل طريقة Deep Ritz، وطريقة Deep Galerkin، والشبكات العصبية المستندة إلى الفيزياء (PINNs). ومع ذلك، غالبًا ما تفشل هذه الأساليب في التقاط التغيرات الحادة في طبقات الحدود وتتطلب موارد حسابية واسعة.
لمعالجة هذه القيود، يقترح المؤلفون طريقة جديدة تسمى “الشبكة العصبية القابلة للنقل المستندة إلى MAEs” (MAE-TransNet)، والتي تدمج التوسعات المتناظرة المتطابقة (MAEs) مع إطار عمل الشبكة العصبية القابلة للنقل. يهدف هذا النهج إلى تعزيز الدقة والكفاءة في حل مشاكل الاضطراب الفردي مع طبقات الحدود. يتميز أسلوب MAE-TransNet بحساب الحلول الداخلية والخارجية عبر المجال الحسابي بالكامل، باستخدام شبكة عصبية ذات طبقتين مع معلمات طبقة مخفية محددة مسبقًا، واستخدام خلايا عصبية موزعة بشكل غير متجانس ومتجانس للحلول الداخلية والخارجية، على التوالي. توضح الورقة هيكل الأقسام التالية، والتي تشمل مراجعة لنظرية MAE وطريقة TransNet، وتطوير خوارزميات MAE-TransNet، والنتائج العددية التي تظهر أدائها المتفوق مقارنة بالأساليب الحالية.
نقاش
في قسم النقاش من الورقة، يستعرض المؤلفون المنهجيات المهمة المتعلقة بأسلوبهم المقترح، مع التركيز بشكل خاص على التوسعات المتناظرة المتطابقة (MAEs) لطريقة براندتل والشبكة العصبية القابلة للنقل (TransNet). توفر MAEs الخاصة ببراندتل إطارًا لحل مشاكل الاضطراب الفردي من خلال دمج الحلول الخارجية والداخلية، والتي تكون صالحة في مناطق مختلفة من المجال. يوضح المؤلفون ذلك من خلال مشكلة قيمة حدود أحادية البعد محددة، مما يوضح كيف يمكن اشتقاق الحل الخارجي من خلال إهمال شروط الحدود عندما تقترب معلمة الاضطراب $\epsilon$ من الصفر، مما يؤدي إلى مشكلة قيمة حدود أبسط. يتم الحصول على الحل الداخلي من خلال تحويل مقياس يكبر طبقة الحدود، مما يسمح بحل دقيق للتدرجات الحادة. يحقق الحل المركب، الذي يجمع بين الحلول الخارجية والداخلية، خطأ قدره $O(\epsilon)$، مما يشير إلى تحسين الدقة مع انخفاض $\epsilon$.
من ناحية أخرى، تعتبر طريقة TransNet نهجًا للشبكات العصبية مصممًا لحل المعادلات التفاضلية الجزئية (PDEs) بكفاءة. تعمل في مرحلتين: أولاً، توليد معلمات الطبقة المخفية المدربة مسبقًا، وثانيًا، تحسين معلمات طبقة الإخراج لتقليل دالة خسارة بقايا PDE. بينما تظهر TransNet دقة عالية وتكاليف حسابية أقل مقارنة بالطرق التقليدية، إلا أنها تكافح مع التقاط التغيرات الحادة في طبقات الحدود لمشاكل الاضطراب الفردي. لمعالجة هذه القيود، يقترح المؤلفون طريقة MAE-TransNet، التي تدمج MAEs مع TransNet للتعامل بشكل فعال مع مشاكل الاضطراب الفردي مع طبقات الحدود. يسمح هذا النهج الهجين بنمذجة دقيقة لكل من الحلول الخارجية والداخلية مع الاستفادة من الكفاءة الحسابية للشبكات العصبية، مما يعزز جودة الحل العامة للمشاكل المعقدة التي تتضمن تدرجات حادة.
DOI: https://doi.org/10.1002/nme.70307
Publication Date: 2026-03-17
Author(s): Zhequan Shen et al.
Primary Topic: Model Reduction and Neural Networks
Overview
In this research, the authors introduce the “MAE-TransNet,” a novel neural network approach designed to effectively solve singular perturbation problems characterized by sharp gradients in narrow boundary layers. By leveraging the theory of matched asymptotic expansions (MAEs), the method decomposes the original problem into inner and outer boundary value problems. The outer solution is approximated using a TransNet with uniform hidden-layer neurons, while the inner solution employs a TransNet with nonuniform hidden-layer neurons. A matching term is then utilized to synthesize these solutions into a composite solution that is uniformly valid across the computational domain.
The MAE-TransNet method not only retains the precision of traditional matched asymptotic expansions but also enhances computational efficiency, as demonstrated through extensive numerical comparisons with other neural network techniques, including TransNet, Physics-Informed Neural Networks (PINN), and Boundary-Layer PINN (BL-PINN). The results indicate that MAE-TransNet significantly outperforms these methods in accurately capturing boundary layer characteristics while reducing computational costs. Furthermore, the method’s ability to apply the same pre-trained parameters across boundary layers of varying thicknesses underscores its transferability. The authors suggest that future work could focus on rigorous theoretical convergence analysis and error estimates to further validate the method’s performance.
Introduction
The introduction of this research paper addresses the challenges associated with singular perturbation problems characterized by thin boundary layers, which arise in various fields such as fluid dynamics, mathematical biology, and heat transfer. The authors highlight the difficulties in accurately solving these problems due to large gradients within the boundary layers, necessitating dense uniform meshes that lead to high computational costs. Traditional numerical methods, including finite difference and finite element methods, struggle with very small perturbation parameters, prompting the exploration of neural network approaches like the Deep Ritz method, Deep Galerkin method, and Physics-informed neural networks (PINNs). However, these methods often fail to effectively capture sharp changes in boundary layers and require extensive computational resources.
To address these limitations, the authors propose a novel method called “MAEs-based transferable neural network” (MAE-TransNet), which integrates matched asymptotic expansions (MAEs) with a transferable neural network framework. This approach aims to enhance accuracy and efficiency in solving singular perturbation problems with boundary layers. The MAE-TransNet method distinguishes itself by computing both inner and outer solutions across the entire computational domain, employing a two-layer neural network with predetermined hidden-layer parameters, and utilizing nonuniformly and uniformly distributed neurons for inner and outer solutions, respectively. The paper outlines the structure of the subsequent sections, which include a review of MAE theory and the TransNet method, the development of the MAE-TransNet algorithms, and numerical results demonstrating its superior performance compared to existing methods.
Discussion
In the discussion section of the paper, the authors review significant methodologies related to their proposed approach, particularly focusing on Prandtl’s Matched Asymptotic Expansions (MAEs) and the Transferable Neural Network (TransNet) method. Prandtl’s MAEs provide a framework for solving singular perturbation problems by combining outer and inner solutions, which are valid in different regions of the domain. The authors illustrate this with a specific one-dimensional boundary value problem, demonstrating how the outer solution can be derived by neglecting boundary conditions as the perturbation parameter $\epsilon$ approaches zero, leading to a simpler boundary value problem. The inner solution is obtained through a scaling transformation that magnifies the boundary layer, allowing for accurate resolution of steep gradients. The composite solution, which combines both outer and inner solutions, achieves an error of $O(\epsilon)$, indicating improved accuracy as $\epsilon$ decreases.
The TransNet method, on the other hand, is a neural network approach designed to solve partial differential equations (PDEs) efficiently. It operates in two stages: first, generating pretrained hidden-layer parameters, and second, optimizing the output layer parameters to minimize the PDE residual loss function. While TransNet demonstrates high accuracy and lower computational costs compared to traditional methods, it struggles with capturing sharp variations in boundary layers of singular perturbation problems. To address this limitation, the authors propose the MAE-TransNet method, which integrates MAEs with TransNet to effectively handle singular perturbation problems with boundary layers. This hybrid approach allows for accurate modeling of both the outer and inner solutions while leveraging the computational efficiency of neural networks, thereby enhancing the overall solution quality for complex problems involving sharp gradients.
