DOI: https://doi.org/10.1007/s00371-025-04340-7
تاريخ النشر: 2026-01-01
المؤلف: Pablo Luesia-Lahoz وآخرون
الموضوع الرئيسي: تكنولوجيا الاستشعار البصري المتقدمة
نظرة عامة
في هذا القسم، يتناول المؤلفون تحدي التصوير غير الخطي العابر، الذي يعيد بناء المشاهد المخفية من خلال تحليل زمن رحلة الضوء المنعكس من سطح ثانوي، يعرف باسم جدار الترحيل. أحد القيود الكبيرة في الطرق الحالية هو مشكلة “المخروط المفقود”، التي تحد من الرؤية بناءً على الترتيب المكاني للأسطح بالنسبة لجدار الترحيل. للتغلب على ذلك، يقترح المؤلفون إعدادًا جديدًا يستخدم جدارين ترحيل متميزين، مستلهمين من تقنيات التصوير الاستريو من رؤية الكمبيوتر.
من خلال نمذجة كلا جدارين الترحيل كفتحات كاميرا افتراضية عامة من خلال مجالات الطور، يجمع المؤلفون بفعالية المساهمات من كل جدار. يسمح هذا النهج المبتكر بالتقاط المعلومات التي عادة ما تضيع، مما يقلل من آثار المخروط المفقود ويحسن صياغة المشكلة بشكل عام. علاوة على ذلك، يقوم المؤلفون بتحليل ظروف الرؤية لاستخراج إشارات الاتجاه من مساهمات كل جدار ترحيل، والتي تستخدم بعد ذلك لتعزيز التصورات، مما يوضح فعالية طريقتهم في تحسين التصوير غير الخطي.
مقدمة
تناقش مقدمة هذه الورقة البحثية التقدم في تقنية التصوير العابر، التي تسمح بالتقاط المشاهد بمعدلات إطارات تصل إلى تريليونات في الثانية، مما يتحدى المفاهيم التقليدية لسرعة الضوء. أحد التطبيقات الرئيسية لهذه التقنية هو التصوير غير الخطي (NLOS)، الذي يعيد بناء المشاهد المحجوبة باستخدام الضوء المنعكس من جدار الترحيل (RW). تتضمن العملية إضاءة RW بومضة قصيرة من الضوء، التي تتناثر في المشهد المخفي ثم يتم التقاطها بواسطة مستشعر زمني. توجد طرق متنوعة، مثل إعادة الإسقاط وعكس نقل الضوء، لإعادة بناء هذه المشاهد المخفية، لكنها تواجه قيودًا، لا سيما “مشكلة المخروط المفقود”، التي تعيق إعادة البناء الدقيقة للأسطح بسبب عدم اليقين والحجب.
يقترح المؤلفون نهجًا جديدًا من خلال استخدام تقنيات الرؤية الاستريو مع جدارين ترحيل يعملان ككاميرات افتراضية. يسمح هذا التكوين بتحسين الرؤية وإشارات الاتجاه للأسطح المخفية، مستفيدًا من معلومات المخروط المفقود كميزة بدلاً من قيد. من خلال دمج الآراء من كلا جدارين الترحيل، يحسن الأسلوب المقترح إعادة بناء الهندسة والاتجاه مقارنة بالتقاطات RW الفردية. يهدف العمل إلى إنشاء نموذج عام للتصوير غير الخطي (NLOS) يدمج رؤى من رؤية الكمبيوتر الكلاسيكية، مما يعزز في النهاية القدرة على إعادة بناء مشاهد مخفية معقدة.
النتائج
في هذا القسم، يناقش المؤلفون النتائج التي تم الحصول عليها من نموذج الكاميرا العام الخاص بهم، الذي يستوعب أي تكوين دوار ومترجم لإعداد العالم الحقيقي (RW). يبرزون أن التحليلات السابقة ركزت على السيناريوهات التي تم فيها التقاط كلا الرؤيتين في وقت واحد. ومع ذلك، يظهرون أن RW واحد يمكن أن يحاكي بفعالية رؤيتين لنفس المشهد المخفي من خلال تغيير موقعه واتجاهه، مما يلغي الضوضاء الخلفية الطفيفة الناتجة عن التداخل متعدد المسارات.
تظهر النتائج، الموضحة في الشكل 6، أن إعادة البناء المستقلة والمجمعة لرقعة – تم تدويرها وإزاحتها بين الالتقاطات – تظهر تحسينات كبيرة. من خلال تقدير التحولات النسبية لـ RW بالنسبة للمشهد المخفي بدقة، يعزز نهج المؤلفين الاستريو رؤية الميزات من خلال تعويض المعلومات المفقودة في رؤية واحدة ببيانات من الأخرى. وبالتالي، تصبح حدود الرقع أكثر وضوحًا في إعادة البناء المجمعة مقارنة بإعادة البناء الفردية.
المناقشة
في هذا القسم، يناقش المؤلفون التقدم في التصوير غير الخطي (NLOS)، لا سيما من خلال تطبيق مجالات الطور وإعداد الفتحتين الجديد المستلهم من تقنية الرؤية الاستريو. يهدف التصوير غير الخطي إلى إعادة بناء الأجسام المخفية من خلال استخدام الضوء غير المباشر الذي تم تشتيته، مع تصنيف الطرق إلى نهج سلبية ونشطة. يبرز المؤلفون فعالية طرق NLOS العابر، التي تلتقط الضوء بسرعات عالية للغاية، مما يسمح بقياسات زمن الرحلة للفوتونات. يبني عملهم على تقنيات سابقة، مثل إعادة الإسقاط المفلتر (FBP) ومشاكل العكس الخطية المستندة إلى إزالة الالتفاف، ليقترحوا إطارًا يستوعب كل من التكوينات المتداخلة وغير المتداخلة.
يعمل إدخال جدارين ترحيل (RWs) كفتحات على تعزيز كمية الضوء الملتقط، مما يحسن رؤية الميزات المخفية مقارنةً بإعدادات الفتحة الواحدة. يظهر المؤلفون أن هذا التكوين الثنائي للفتحات يسمح بدمج الالتقاطات المستقلة والمعتمدة للإضاءة، مما يقلل بفعالية من مشكلة المخروط المفقود ويمكّن من استخراج معلومات اتجاه السطح. تؤكد النتائج التجريبية الطريقة المقترحة، حيث تظهر تحسينات كبيرة في جودة إعادة البناء ورؤية الهندسات المخفية. يقترح المؤلفون أن نهجهم لا يعزز فقط التصوير غير الخطي (NLOS) ولكن أيضًا يفتح آفاقًا للبحث المستقبلي في خوارزميات إعادة بناء الهندسة وتطبيقاتها في مجالات مثل التصوير الطبي والاستكشاف تحت الأرض.
القيود
ت stem القيود في التصوير غير الخطي (NLOS) بشكل أساسي من قيود الرؤية التي تفرضها الحجم المحدود لنافذة إعادة البناء (RW). تجعل هذه القيود التصوير غير الخطي مشكلة غير محددة، حيث يتم التقاط جزء فقط من الضوء المتناثر من المشهد المخفي، مما يؤدي إلى عدم القدرة على إعادة بناء ميزات معينة، بغض النظر عن تقنية التصوير المستخدمة. هذه الظاهرة مشابهة لمشكلة “المخروط المفقود” التي تواجهها التصوير المقطعي المحوسب الطبي، حيث تقيد البيانات غير المكتملة إعادة بناء الأسطح في اتجاهات معينة. في سياق التصوير غير الخطي، يؤدي غياب تعديل الإشارة في مجال فورييه إلى تفاقم هذه المشكلة، مما يمنع إعادة بناء الأسطح داخل المخروط المفقود، حتى عندما تصل بعض الإشعاع إلى RW.
لمعالجة هذه التحديات، تتضمن الدراسة الحالية مجموعة من المواقع والاتجاهات التي يمكن إعادة بنائها، مستخدمة إياها كإشارات اتجاه إضافية. يتم استخدام هذه الإشارات لوضع علامات على إعادة بناء المشهد المخفي، مما يوفر بشكل فعال معلومات اتجاه إضافية تشبه خريطة عادية. يهدف هذا النهج إلى تعزيز دقة إعادة بناء التصوير غير الخطي (NLOS) من خلال الاستفادة من البيانات المحدودة المتاحة من RW، مما يقلل من بعض القيود الكامنة المرتبطة بمشكلة المخروط المفقود.
DOI: https://doi.org/10.1007/s00371-025-04340-7
Publication Date: 2026-01-01
Author(s): Pablo Luesia-Lahoz et al.
Primary Topic: Advanced Optical Sensing Technologies
Overview
In this section, the authors address the challenge of transient non-line-of-sight imaging, which reconstructs hidden scenes by analyzing the time of flight of light reflected from a secondary surface, known as a relay wall. A significant limitation in existing methods is the “missing cone” problem, which restricts visibility based on the spatial arrangement of surfaces relative to the relay wall. To overcome this, the authors propose a novel setup utilizing two distinct relay walls, inspired by stereo imaging techniques from computer vision.
By modeling both relay walls as generalized virtual camera apertures through phasor fields, the authors effectively combine contributions from each wall. This innovative approach allows for the capture of information that would typically be lost, thereby mitigating the effects of the missing cone and improving the overall problem formulation. Furthermore, the authors analyze visibility conditions to extract orientation cues from the contributions of each relay wall, which are subsequently used to enhance visualizations, demonstrating the efficacy of their method in improving non-line-of-sight imaging.
Introduction
The introduction of this research paper discusses the advancements in transient imaging technology, which allows for scene capture at frame rates of trillions per second, challenging traditional notions of light speed. A key application of this technology is non-line-of-sight (NLOS) imaging, which reconstructs occluded scenes using light reflected from a relay wall (RW). The process involves illuminating the RW with a short pulse of light, which scatters into the hidden scene and is then captured by a time-resolved sensor. Various methods, such as backprojection and light transport inversion, exist to reconstruct these hidden scenes, but they face limitations, particularly the “missing-cone problem,” which hinders accurate surface reconstruction due to uncertainties and occlusions.
The authors propose a novel approach by employing stereo-vision techniques with two RWs acting as virtual cameras. This configuration allows for enhanced visibility and orientation cues of the hidden surfaces, leveraging the missing-cone information as a feature rather than a limitation. By combining the views from both RWs, the proposed method improves the reconstruction of geometry and orientation compared to individual RW captures. The work aims to create a generalized model for NLOS imaging that integrates insights from classical computer vision, ultimately enhancing the ability to reconstruct complex hidden scenes.
Results
In this section, the authors discuss the results obtained from their generalized camera model, which accommodates any rotating and translating configuration of a real-world (RW) setup. They highlight that previous analyses focused on scenarios where both views were captured simultaneously. However, they demonstrate that a single RW can effectively simulate two views of the same hidden scene by varying its position and orientation, thereby eliminating the minor background noise from multi-path interference.
The findings, illustrated in Figure 6, reveal that the independent and combined reconstructions of a patch—rotated and displaced between captures—show significant improvements. By accurately estimating the relative transformations of the RW concerning the hidden scene, the authors’ stereo approach enhances the visibility of features by compensating for the missing information in one view with data from the other. Consequently, the boundaries of the patches become more discernible in the combined reconstruction compared to the individual reconstructions.
Discussion
In this section, the authors discuss advancements in Non-Line-of-Sight (NLOS) imaging, particularly through the application of phasor fields and a novel dual-aperture setup inspired by stereo-vision technology. NLOS imaging aims to reconstruct hidden objects by utilizing indirect light that has been scattered, with methods categorized into passive and active approaches. The authors highlight the effectiveness of transient NLOS methods, which capture light at extremely high speeds, allowing for time-of-flight measurements of photons. Their work builds on previous techniques, such as filtered backprojection (FBP) and deconvolution-based linear inverse problems, to propose a framework that accommodates both confocal and non-confocal configurations.
The introduction of two relay walls (RWs) as apertures enhances the amount of captured light, thereby improving the visibility of hidden features compared to single-aperture setups. The authors demonstrate that this dual-aperture configuration allows for the combination of independent and dependent illumination captures, effectively mitigating the missing cone problem and enabling the extraction of surface orientation information. Experimental results validate the proposed method, showing significant improvements in the reconstruction quality and visibility of hidden geometries. The authors suggest that their approach not only enhances NLOS imaging but also opens avenues for future research in geometry reconstruction algorithms and applications in fields such as medical imaging and underground exploration.
Limitations
The limitations of Non-Line-of-Sight (NLOS) imaging primarily stem from the visibility constraints imposed by the restricted size of the reconstruction window (RW). This limitation renders NLOS imaging an ill-posed problem, as only a fraction of the scattered light from the hidden scene is captured, leading to the inability to reconstruct certain features, regardless of the imaging technique utilized. This phenomenon is analogous to the “missing cone” problem encountered in medical computed tomography, where incomplete data restricts the reconstruction of surfaces in specific orientations. In the context of NLOS imaging, the absence of signal modulation in the Fourier domain exacerbates this issue, preventing the reconstruction of surfaces within the missing cone, even when some radiance reaches the RW.
To address these challenges, the current study incorporates the subset of positions and orientations that can be reconstructed, utilizing them as additional orientation cues. These cues are employed to label the reconstructions of the hidden scene, effectively providing supplementary orientation information akin to a normal map. This approach aims to enhance the fidelity of NLOS imaging reconstructions by leveraging the limited data available from the RW, thereby mitigating some of the inherent limitations associated with the missing cone problem.