إعادة بناء مكانية عالية الجودة وتوليد صور عمودية باستخدام تقنية التشتت الغاوسي ثنائي الأبعاد بكفاءة High-quality spatial reconstruction and orthoimage generation using efficient 2D Gaussian splatting

شارك:
المجلة: Signal Image and Video Processing، المجلد: 20، العدد: 8
DOI: https://doi.org/10.1007/s11760-026-05511-2
تاريخ النشر: 2026-06-25
المؤلف: Qian Wang وآخرون
الموضوع الرئيسي: المسح ثلاثي الأبعاد والتراث الثقافي

نظرة عامة

تقدم البحث طريقة جديدة لإنشاء خرائط الصور الجوية الرقمية الحقيقية (TDOMs) باستخدام تقنية التوزيع الغاوسي ثنائي الأبعاد (2DGS)، مما يلغي الحاجة إلى نماذج السطح الرقمية التقليدية (DSM) وكشف الانسداد. تستفيد هذه الطريقة من توليد خرائط العمق لاسترجاع المعلومات المكانية لكل بكسل، مما يمكّن من إعادة بناء المشهد بدقة عالية. من خلال اعتماد استراتيجية تقسيم وتغلب، تحقق الطريقة تدريبًا فعالًا وعرضًا لخرائط TDOM عالية الدقة مع الحفاظ على الجودة في التضاريس المعقدة والهياكل الرقيقة. تشير النتائج التجريبية إلى أن هذه التقنية تدعم بشكل فعال إعادة بناء المشاهد على نطاق واسع ونمذجة التضاريس، مما يوفر بيانات مكانية دقيقة مفيدة للتخطيط الحضري وإدارة البنية التحتية والمراقبة البيئية.

في الختام، تستخدم الطريقة المقترحة تقنية العرض القابلة للتفريق لإنشاء خرائط TDOM عالية الجودة على نطاق واسع من بيانات الطائرات بدون طيار دون الحاجة إلى معلومات وضع الكاميرا السابقة. يتم تقسيم المشهد بشكل منهجي إلى كتل، ويتم دمج سحب النقاط للتصوير الجماعي، مما ينتج عنه صور جوية وخرائط عمق متطابقة. تظهر النتائج قدرة الطريقة على التكيف مع مشاهد متنوعة، وتمثيل دقيق للانسدادات في المباني، وإعادة بناء الهياكل الرقيقة، محققة دقة قابلة للمقارنة مع البرمجيات التجارية. على الرغم من أوقات التدريب الأطول لكل مشهد، تعزز الطريقة دعم البيانات المكانية عبر مجالات متعددة، مما يحسن جودة اتخاذ القرار. ستركز الأعمال المستقبلية على زيادة كفاءة إعادة البناء وتحسين استخدام الموارد أثناء التدريب.

مقدمة

تناقش المقدمة أهمية خرائط الصور الجوية الرقمية (DOMs) التي تم إنشاؤها من مسوحات الطائرات بدون طيار (UAV)، مع تسليط الضوء على تطبيقاتها في الزراعة والمراقبة البيئية وتقييم الكوارث. يتم إنتاج DOMs من خلال دمج نماذج الارتفاع الرقمية (DEMs) مع الصور الجوية لتصحيح تشوهات الإسقاط، ومع ذلك، يمكن أن تعاني من الانسدادات التي تؤدي إلى عيوب وعدم دقة. تعمل خرائط الصور الجوية الرقمية الحقيقية (TDOMs) على تحسين ذلك من خلال استخدام نماذج السطح الرقمية (DSMs) وتنفيذ فحوصات الرؤية للتخفيف من آثار الانسداد.

تستعرض هذه الفقرة منهجيات مختلفة لتوليد TDOM، بما في ذلك طريقة Z-buffer، التي تتعقب المسافات لحل الرؤية، والأساليب الحديثة المعتمدة على التعلم مثل الشبكات التنافسية التوليدية (GANs)، التي تواجه تحديات التعميم والاعتماد على بيانات LiDAR. تقدم التقنيات الناشئة مثل مجالات الإشعاع العصبي (NeRF) والتوزيع الغاوسي ثلاثي الأبعاد (3DGS) حلولًا مبتكرة، حيث يوفر 3DGS عرضًا أسرع من خلال المعالجة المتوازية ولكنه يواجه قيودًا في القابلية للتوسع والوفاء. تهدف الطريقة المقترحة، 2DGS، إلى تعزيز توليد TDOM من خلال معالجة عدم التناسق في المنظور لـ 3DGS، وتحسين التمثيل الهندسي، واستخراج خرائط العمق أثناء العرض لزيادة دقة إعادة البناء. تستلهم هذه الطريقة من VastGaussian وتستخدم استراتيجية تقسيم وتغلب لتدريب فعال وعرض عالي الدقة ضمن موارد حسابية محدودة.

طرق

تناقش هذه الفقرة طرقًا مختلفة لتوليد خرائط الانسداد المدفوعة بالنسيج ثلاثية الأبعاد (TDOM)، مع تسليط الضوء على الأساليب التقليدية والمعاصرة. تعتمد الطرق التقليدية، مثل خوارزمية Z-buffer وكشف الانسداد القائم على الزاوية، بشكل كبير على نماذج السطح الرقمية عالية الدقة (DSMs) وتواجه تحديات في كشف الحواف وتعويض النسيج. على الرغم من أن هذه الطرق تعتبر أساسية، إلا أنها غالبًا ما تواجه صعوبات في القابلية للتوسع والكفاءة بسبب اعتمادها على DSMs المكلفة وتعقيد تحليل الانسداد.

في المقابل، دمجت التطورات الحديثة تقنيات التعلم العميق لتبسيط توليد TDOM. على سبيل المثال، يستخدم Urban-SnowflakeNet إطار عمل للتعلم العميق لتعزيز إعادة بناء سحب النقاط للمباني، مما يحسن تصحيح DSM ويقلل من التشوهات. ومع ذلك، لا تزال هذه الطرق تعتمد على بيانات LiDAR عالية الجودة، مما قد يحد من قابليتها للتطبيق في سياقات معينة. بالإضافة إلى ذلك، ظهرت طرق العرض القابلة للتفريق، مثل مجالات الإشعاع العصبي (NeRF)، كبديل واعد، حيث تقدم إعادة بناء مشهد عالية الجودة من خلال تمثيلات عصبية ضمنية. على الرغم من مزاياها في الوفاء، تواجه الأساليب المعتمدة على NeRF تحديات تتعلق بكفاءة العرض، مما يشير إلى الحاجة إلى مزيد من التحسين في سير عمل توليد TDOM.

مناقشة

في هذه الفقرة، يناقش المؤلفون المنهجية والنتائج لخط أنابيب توليد TDOM (خريطة الصور الجوية الرقمية للتضاريس) المقترح، والذي يستفيد من تقنية العرض القابلة للتفريق لإنتاج مخرجات عالية الجودة من بيانات الطائرات بدون طيار دون الحاجة إلى معلومات وضع الكاميرا السابقة. يبدأ خط الأنابيب بتهيئة سحب النقاط كغاوسيات ثنائية الأبعاد، تليها توليد خرائط العمق والعرض من خلال استراتيجية تقسيم وتغلب لاستيعاب المشاهد على نطاق واسع. يوضح المؤلفون الصيغ الرياضية للبدائيات الغاوسية ثلاثية الأبعاد، ومصفوفات الإسقاط، وتقدير العمق، مع التأكيد على مزايا استخدام أقراص غاوسية ثنائية الأبعاد لحل عدم التناسق في العمق المتأصل في التمثيلات ثلاثية الأبعاد.

تتم تقييم طريقة توليد TDOM من خلال مقارنات نوعية وكمية ضد البرمجيات التجارية الحديثة وطريقة معتمدة على التعلم، TOrtho-Gaussian. تشير النتائج إلى أن الطريقة المقترحة تحقق دقة هندسية تنافسية، مع RMSE قدره 1.928 م، متفوقة على العديد من الطرق التقليدية مع الحفاظ على مقاييس إعادة بناء الصور عالية الجودة. بالإضافة إلى ذلك، يتم التحقق من دقة خرائط العمق المعاد بناؤها مقابل نموذج ارتفاع رقمي (DEM) من Metashape، مما يظهر أخطاء منخفضة متسقة والحفاظ الفعال على هندسة المشهد. بشكل عام، تسلط النتائج الضوء على قدرة الطريقة على التكيف مع مشاهد متنوعة وإمكاناتها لتعزيز دعم البيانات المكانية في تطبيقات المسح ورسم الخرائط، على الرغم من أوقات التدريب الأطول مقارنة بالبدائل التجارية. تهدف الأعمال المستقبلية إلى تحسين كفاءة إعادة البناء واستخدام الموارد.

Journal: Signal Image and Video Processing, Volume: 20, Issue: 8
DOI: https://doi.org/10.1007/s11760-026-05511-2
Publication Date: 2026-06-25
Author(s): Qian Wang et al.
Primary Topic: 3D Surveying and Cultural Heritage

Overview

The research presents a novel method for generating True Digital Orthophoto Maps (TDOMs) using 2D Gaussian Splatting (2DGS), which eliminates the need for traditional Digital Surface Models (DSM) and occlusion detection. This approach leverages depth map generation to retrieve spatial information for each pixel, enabling high-precision scene reconstruction. By employing a divide-and-conquer strategy, the method achieves efficient training and rendering of high-resolution TDOMs while maintaining quality in complex terrains and thin structures. Experimental results indicate that this technique effectively supports large-scale scene reconstruction and terrain modeling, providing accurate spatial data beneficial for urban planning, infrastructure management, and environmental monitoring.

In conclusion, the proposed method utilizes differentiable rendering technology to create large-scale, high-quality TDOMs from UAV data without prior camera pose information. The scene is systematically divided into blocks, and point clouds are fused for batch rasterization, yielding orthophotos and corresponding depth maps. The results demonstrate the method’s adaptability to various scenes, accurate representation of building occlusions, and reconstruction of thin structures, achieving accuracy comparable to commercial software. Despite longer training times per scene, the method enhances spatial data support across multiple fields, improving decision-making quality. Future work will focus on increasing reconstruction efficiency and optimizing resource usage during training.

Introduction

The introduction discusses the significance of Digital Orthophoto Maps (DOMs) generated from Unmanned Aerial Vehicle (UAV) surveys, highlighting their applications in agriculture, environmental monitoring, and disaster assessment. DOMs are produced by integrating Digital Elevation Models (DEMs) with aerial imagery to correct projection distortions, yet they can suffer from occlusions that lead to artifacts and inaccuracies. True Digital Orthophoto Maps (TDOMs) improve upon this by utilizing Digital Surface Models (DSMs) and implementing visibility checks to mitigate occlusion effects.

The section reviews various methodologies for TDOM generation, including the Z-buffer method, which tracks distances to resolve visibility, and recent learning-based approaches like Generative Adversarial Networks (GANs), which face generalization challenges and dependence on LiDAR data. Emerging techniques such as Neural Radiance Fields (NeRF) and 3D Gaussian Splatting (3DGS) offer innovative solutions, with 3DGS providing faster rendering through parallel processing but facing limitations in scalability and fidelity. The proposed method, 2DGS, aims to enhance TDOM generation by addressing the perspective inconsistencies of 3DGS, improving geometric representation, and extracting depth maps during rendering to boost reconstruction accuracy. This approach is inspired by VastGaussian and employs a divide-and-conquer strategy for efficient training and high-resolution rendering within constrained computational resources.

Methods

The section discusses various methods for generating 3D Texture-Driven Occlusion Maps (TDOM), highlighting both traditional and contemporary approaches. Traditional methods, such as the Z-buffer algorithm and angle-based occlusion detection, rely heavily on high-precision Digital Surface Models (DSMs) and face challenges in edge detection and texture compensation. These methods, while foundational, often struggle with scalability and efficiency due to their dependence on costly DSMs and the complexity of occlusion analysis.

In contrast, recent advancements have incorporated deep learning techniques to streamline TDOM generation. For instance, Urban-SnowflakeNet employs a deep learning framework to enhance the reconstruction of building point clouds, thereby improving DSM rectification and reducing distortions. However, these methods still depend on high-quality LiDAR data, which can limit their applicability in certain contexts. Additionally, differentiable rendering methods, such as Neural Radiance Fields (NeRF), have emerged as a promising alternative, offering high-quality scene reconstruction through implicit neural representations. Despite their advantages in fidelity, NeRF-based approaches face challenges related to rendering efficiency, indicating a need for further optimization in TDOM generation workflows.

Discussion

In this section, the authors discuss the methodology and findings of their proposed TDOM (Terrain Digital Orthophoto Map) generation pipeline, which leverages differentiable rendering technology to produce high-quality outputs from UAV data without requiring prior camera pose information. The pipeline begins with the initialization of point clouds as 2D Gaussians, followed by depth map generation and rendering through a divide-and-conquer strategy to accommodate large-scale scenes. The authors detail the mathematical formulations for 3D Gaussian primitives, projection matrices, and depth estimation, emphasizing the advantages of using 2D Gaussian disks to resolve depth inconsistencies inherent in 3D representations.

The evaluation of the TDOM generation method is conducted through qualitative and quantitative comparisons against state-of-the-art commercial software and a learning-based method, TOrtho-Gaussian. The results indicate that the proposed method achieves competitive geometric accuracy, with an RMSE of 1.928 m, outperforming several traditional methods while maintaining high-quality image reconstruction metrics. Additionally, the accuracy of the reconstructed depth maps is validated against a digital elevation model (DEM) from Metashape, demonstrating consistent low errors and effective preservation of scene geometry. Overall, the findings highlight the method’s adaptability to various scenes and its potential to enhance spatial data support in surveying and mapping applications, despite longer training times compared to commercial alternatives. Future work aims to improve reconstruction efficiency and resource utilization.