DOI: https://doi.org/10.1016/j.autcon.2026.106791
تاريخ النشر: 2026-01-27
المؤلف: Yuandong Pan وآخرون
الموضوع الرئيسي: نموذج معلومات البناء ودمج البناء
نظرة عامة
تقدم ورقة البحث Graph-DT-GPT، وهو إطار عمل متعدد الوكلاء يعزز التفاعل مع التوائم الرقمية في صناعة العمارة والهندسة والبناء (AEC) من خلال دمج نماذج اللغة الكبيرة (LLMs) مع هياكل البيانات القائمة على الرسوم البيانية. يعالج هذا الإطار التحديات المتعلقة بالمعرفة المتخصصة المطلوبة لاستعلامات قواعد البيانات من خلال تمكين التفاعلات باللغة الطبيعية عبر وكلاء وحدويين مسؤولين عن اتخاذ القرار، وتوليد الاستعلامات، واستخراج الإجابات. تم تقييمه على حالتين استخدام – رسم بياني على مستوى المدينة يحتوي على أكثر من 40,000 عقدة مبنى وتصميمات شقق على مستوى الغرفة – أظهر Graph-DT-GPT معدلات دقة مثيرة للإعجاب بلغت 100% و95.5% لحالة المدينة باستخدام Claude Sonnet 4.5 وGPT-4o، على التوالي، و100% صحة لحالة الغرفة. تتجاوز هذه النتائج بشكل كبير الأساليب الأساسية، مما يدل على إمكانيات الإطار لاسترجاع المعلومات القابلة للتوسع والموثوقة في تطبيقات AEC.
في الختام، يمثل Graph-DT-GPT تقدمًا كبيرًا في اعتماد تقنيات التوائم الرقمية، مما يسهل التفاعلات البديهية ويحسن إدارة البيانات عبر مراحل دورة حياة البناء المختلفة. من خلال السماح للمستخدمين الذين ليس لديهم خبرة تقنية بالتفاعل مع قدرات الاستعلام المعقدة، يعزز الإطار الوصول الأوسع والمشاركة مع منصات التوائم الرقمية. يعزز الهيكل المعتمد على الوكلاء دقة الاستجابة ويقلل من القضايا الشائعة المتعلقة بالهلوسة المرتبطة بمخرجات LLM، مما يزيد من موثوقيتها للتطبيقات في العالم الحقيقي. ومع ذلك، تعترف الدراسة بالقيود، بما في ذلك الحاجة إلى مزيد من البحث حول التمثيلات الهندسية والتأثير المحتمل للهيكل متعدد الوكلاء على أوقات الاستجابة الحاسوبية. ستسعى الأعمال المستقبلية إلى توسيع قدرات الإطار لاستيعاب أنماط بيانات متنوعة ومجالات تطبيق أوسع، مع السعي في النهاية إلى نظام بيئي شامل للتوائم الرقمية يدعم إدارة المرافق المتكاملة عبر مقاييس مختلفة.
مقدمة
تناقش مقدمة الورقة الاعتماد المتزايد للتوائم الرقمية في صناعة العمارة والهندسة والبناء (AEC)، مع تسليط الضوء على دورها كتمثيلات رقمية للأصول المادية التي تعزز عمليات دورة الحياة وكفاءة الإدارة والاستدامة. من خلال دمج مصادر بيانات متنوعة، تسهل التوائم الرقمية تطبيقات مثل مراقبة البناء، والصيانة التنبؤية، والتخطيط الحضري. تؤكد الورقة على إمكانيات معالجة اللغة الطبيعية (NLP)، وخاصة من خلال نماذج اللغة الكبيرة (LLMs) مثل ChatGPT، لتحسين تفاعل المستخدم مع التوائم الرقمية، مما يجعلها أكثر وصولًا لأصحاب المصلحة غير التقنيين.
ومع ذلك، لا تزال هناك تحديات تتعلق بموثوقية مخرجات LLM، التي يمكن أن تكون عرضة لعدم الدقة أو “الهلوسات”. لمعالجة هذه القضايا، تقدم الورقة Graph-DT-GPT، وهو إطار يجمع بين LLMs والتمثيلات القائمة على الرسوم البيانية للتوائم الرقمية. يهدف هذا الإطار إلى تعزيز دقة وقابلية استخدام التفاعلات باللغة الطبيعية من خلال تأصيل مخرجات LLM في بيانات منظمة، مما يقلل من الحاجة إلى الخبرة التقنية. يتميز الهيكل المقترح بنظام متعدد الوكلاء مصمم للاستعلام المنظم عبر الرسوم البيانية للتوائم الرقمية، مما يظهر قابلية التوسع وتحسين الأداء في مهام التفكير المعقدة مقارنة بالأساليب الحالية. توضح الورقة هيكله، بما في ذلك مراجعة الأدبيات ذات الصلة، ووصفًا تفصيليًا للإطار، وتجارب التحقق لتقييم فعاليته.
النتائج
في هذا القسم، يوضح المؤلفون تنفيذ إطار العمل المقترح، الذي يتم تقييمه من خلال تجارب تستخدم رسمًا بيانيًا للمدينة ورسومًا بيانية لغرف الشقق. تظهر النتائج فعالية الإطار في معالجة وتحليل البيانات المكانية، مما يبرز قابليته للتطبيق في التخطيط الحضري وتصميم العمارة. تشير النتائج إلى تحسينات كبيرة في تمثيل البيانات ودقة التحليل مقارنة بالمنهجيات الحالية، مما يبرز إمكانيات الإطار للتطبيقات العملية في المجالات ذات الصلة.
المناقشة
تسلط المناقشة الضوء على التكامل المتزايد لنماذج اللغة الكبيرة (LLMs) في تطوير التوائم الرقمية، خاصة في تكامل البيانات والنمذجة. تظهر دراسات متنوعة إمكانيات LLMs لأتمتة عمليات مثل إنشاء نماذج ثلاثية الأبعاد من الصور ثنائية الأبعاد، وتعزيز تحليل العقود من خلال الرسوم البيانية المعرفية، وتحسين عمليات البناء عبر نماذج تعتمد على الوكلاء الذكاء الاصطناعي. على الرغم من هذه التقدمات، لا تزال هناك تحديات، بما في ذلك قابلية التوسع الحاسوبية، وخصوصية البيانات، ومشكلة هلوسة النماذج. من الجدير بالذكر أن الأبحاث الحالية غالبًا ما تركز على مهام معزولة دون معالجة الحاجة إلى تفاعلات معقدة باللغة الطبيعية مع بيانات منظمة، مما يشير إلى فجوة حاسمة في هذا المجال.
عادةً ما يستخدم هيكل التوائم الرقمية نهجًا متعدد الطبقات، مما يبرز أهمية نماذج البيانات المنظمة للإدارة الفعالة وتكامل البيانات غير المتجانسة. ومع ذلك، يتطلب التفاعل مع هذه التمثيلات المنظمة غالبًا معرفة متخصصة، مما يبرز ضرورة وجود أطر تسهل واجهات اللغة الطبيعية البديهية. تفضل التمثيلات القائمة على الرسوم البيانية بشكل متزايد لقدرتها على نمذجة العلاقات المعقدة، ومع ذلك لا يزال دمج LLMs ضمن هذه الأنظمة غير مستكشف بشكل كافٍ بسبب التحديات مثل الحاجة إلى خبرة المجال وقيود LLMs في إنتاج مخرجات موثوقة.
لمعالجة هذه الفجوات، تقترح الورقة Graph-DT-GPT، وهو إطار يعتمد على الوكلاء يمكّن التفاعل باللغة الطبيعية مع التوائم الرقمية القائمة على الرسوم البيانية. يتضمن هذا الإطار تصميمًا وحدويًا مع وكلاء متميزين مسؤولين عن تحليل الاستعلامات، وتوليد الأوامر، واستخراج الإجابات، مما يعزز موثوقية وتفسير التفاعلات. من خلال السماح للمستخدمين بالاستعلام وتعديل بيانات التوائم الرقمية من خلال اللغة الطبيعية، يهدف Graph-DT-GPT إلى جعل أنظمة التوائم الرقمية أكثر وصولًا وفعالية للمستخدمين غير الخبراء، مما يحسن في النهاية عمليات اتخاذ القرار في صناعة العمارة والهندسة والبناء (AEC).
DOI: https://doi.org/10.1016/j.autcon.2026.106791
Publication Date: 2026-01-27
Author(s): Yuandong Pan et al.
Primary Topic: BIM and Construction Integration
Overview
The research paper introduces Graph-DT-GPT, a multi-agent framework that enhances the interaction with digital twins in the Architecture, Engineering, and Construction (AEC) industry by integrating Large Language Models (LLMs) with graph-based data structures. This framework addresses the challenges of specialized knowledge required for database querying by enabling natural language interactions through modular agents responsible for decision-making, query generation, and answer extraction. Evaluated on two use cases—a city-level graph with over 40,000 building nodes and room-level apartment layouts—Graph-DT-GPT demonstrated impressive accuracy rates of 100% and 95.5% for the city-scale case using Claude Sonnet 4.5 and GPT-4o, respectively, and 100% correctness for the room-level case. These results significantly surpass baseline methods, indicating the framework’s potential for scalable and reliable information retrieval in AEC applications.
In conclusion, Graph-DT-GPT represents a significant advancement in the adoption of digital twin technologies, facilitating intuitive interactions and improving data management across various construction lifecycle stages. By allowing users without technical expertise to engage with complex querying capabilities, the framework promotes broader accessibility and engagement with digital twin platforms. The agent-based architecture enhances response accuracy and reduces the common hallucination issues associated with LLM outputs, thereby increasing trustworthiness for real-world applications. However, the study acknowledges limitations, including the need for further research on geometric representations and the potential impact of the multi-agent architecture on computational response times. Future work will aim to expand the framework’s capabilities to accommodate diverse data modalities and broader application domains, ultimately striving for a comprehensive digital twin ecosystem that supports integrated facility management across various scales.
Introduction
The introduction of the paper discusses the growing adoption of digital twins in the Architecture, Engineering, and Construction (AEC) industry, highlighting their role as digital representations of physical assets that enhance lifecycle processes, management efficiency, and sustainability. By integrating diverse data sources, digital twins facilitate applications such as construction monitoring, predictive maintenance, and urban planning. The paper emphasizes the potential of Natural Language Processing (NLP), particularly through Large Language Models (LLMs) like ChatGPT, to improve user interaction with digital twins, making them more accessible to non-technical stakeholders.
However, challenges remain regarding the reliability of LLM outputs, which can be prone to inaccuracies or “hallucinations.” To address these issues, the paper introduces Graph-DT-GPT, a framework that combines LLMs with graph-based representations of digital twins. This framework aims to enhance the accuracy and usability of natural language interactions by grounding LLM outputs in structured data, thereby reducing the need for technical expertise. The proposed architecture features a modular, multi-agent system designed for structured querying over digital twin graphs, demonstrating scalability and improved performance in complex reasoning tasks compared to existing methods. The paper outlines its structure, including a review of relevant literature, a detailed description of the framework, and validation experiments to assess its effectiveness.
Results
In this section, the authors detail the implementation of their proposed framework, which is evaluated through experiments utilizing a city graph and apartment-level room graphs. The results demonstrate the effectiveness of the framework in processing and analyzing spatial data, highlighting its applicability in urban planning and architectural design. The findings indicate significant improvements in data representation and analysis accuracy compared to existing methodologies, underscoring the framework’s potential for practical applications in related fields.
Discussion
The discussion highlights the growing integration of large language models (LLMs) in the development of digital twins, particularly in data integration and modeling. Various studies demonstrate the potential of LLMs to automate processes such as 3D model creation from 2D images, enhance contract analysis through knowledge graphs, and improve building operations via AI agent-based models. Despite these advancements, challenges remain, including computational scalability, data privacy, and the issue of model hallucinations. Notably, existing research often focuses on isolated tasks without addressing the need for complex natural language interactions with structured data, indicating a critical gap in the field.
The architecture of digital twins typically employs a layered approach, emphasizing the importance of structured data models for effective management and integration of heterogeneous data. However, the interaction with these structured representations often requires specialized knowledge, underscoring the necessity for frameworks that facilitate intuitive natural language interfaces. Graph-based representations are increasingly favored for their ability to model complex relationships, yet the integration of LLMs within these systems is still underexplored due to challenges such as the need for domain expertise and the limitations of LLMs in generating reliable outputs.
To address these gaps, the paper proposes Graph-DT-GPT, an agent-based framework that enables natural language interaction with graph-based digital twins. This framework incorporates a modular design with distinct agents responsible for query decomposition, command generation, and answer extraction, enhancing the reliability and interpretability of interactions. By allowing users to query and modify digital twin data through natural language, Graph-DT-GPT aims to make digital twin systems more accessible and effective for non-expert users, ultimately improving decision-making processes in the architecture, engineering, and construction (AEC) industry.
