استخدام صور عرض الشارع ونماذج اللغة البصرية للتنبؤ بقيم التراث لدعم الحوكمة: المخاطر والأخلاقيات وآثار السياسات Using street view images and visual LLMs to predict heritage values for governance support: risks, ethics, and policy implications

شارك:
المجلة: npj Heritage Science، المجلد: 14، العدد: 1
DOI: https://doi.org/10.1038/s40494-026-02924-7
تاريخ النشر: 2026-08-26
المؤلف: Tim David Johansson وآخرون
الموضوع الرئيسي: إدارة التراث الثقافي والحفاظ عليه

الطرق

الطرق المستخدمة في هذه الدراسة موضحة بالتفصيل، مع التركيز على دمج وتحليل شهادات أداء الطاقة (EPCs) لقاعدة بيانات كبيرة تضم 178,545 مبنى سكني متعدد العائلات و93,629 مبنى غير سكني. هذه المباني مرتبطة جغرافياً بسجل عقاري وطني يشمل حوالي تسعة ملايين هيكل. تستخدم المنهجية معرفات فريدة عالمياً وإحداثيات جغرافية لتسهيل الجغرافيا المرجعية، وجمع البيانات الوصفية، وحسابات خطوط الرؤية. تم الحصول على بصمات المباني وخطوط وسط الطرق من المسح الأرضي السويدي (Lantmäteriet)، مما يسهل الانضمامات المكانية وتوليد صور الواجهة.

على الرغم من التغطية الواسعة التي توفرها شهادات أداء الطاقة، إلا أن موثوقية معلومات قيمة التراث داخلها موضع تساؤل، حيث أن التصنيفات الخاطئة شائعة، مما يترك العديد من المباني التراثية المحمية رسمياً غير معترف بها. لتعزيز دقة بيانات التراث، تتضمن الدراسة قاعدة بيانات التراث المبني، التي تشمل أكثر من 80,000 مبنى، مع حوالي 13,000 معترف بها على المستوى الوطني. وهذا يمثل حوالي 0.15% فقط من إجمالي مخزون المباني السويدية. لمعالجة الفجوات في تمثيل التراث، استخدم الباحثون مجموعة بيانات ‘Räkna Q’، التي توثق المباني المحمية بموجب قانون التخطيط والبناء (PBA) على المستويات الإقليمية والمحلية. توفر هذه المجموعة، المشتقة من الخطط التفصيلية وتنظيمات المناطق منذ عام 1987، رؤية أكثر شمولاً لقيم التراث عبر السويد، مما يجعلها معياراً حاسماً للتحقق من منهجية الدراسة.

النتائج

تقيم قسم النتائج في الدراسة فعالية مؤشرات التراث المتوقعة بواسطة GPT من خلال مقارنتها مع الميزات المعروفة و السجلات الوطنية للتراث، وبشكل خاص قاعدة بيانات التراث المبني وRäkna Q. تكشف التحليلات أن مؤشرات التراث المتوقعة لمباني Räkna Q، التي تعود أساساً إلى عام 1921، تميل إلى الحصول على درجات أقل من 50، مما يشير إلى تحيز محافظ في تقييم النموذج لما يشكل التراث. وهذا يتناقض مع الدرجات الأعلى للمباني المحمية وطنياً (Byggnadsminnen)، التي تكون عادةً أقدم (سنة البناء المتوسطة 1841) وتمتلك ميزات معمارية أكثر تميزاً.

تبحث الدراسة أيضاً في التحيزات المحتملة في المؤشرات المتوقعة، خاصة فيما يتعلق بالعوامل الجغرافية والاجتماعية الاقتصادية. تجد أن المباني في المناطق الثرية، وخاصة في ستوكهولم، من المرجح أن تحصل على درجات تراث أعلى. بالإضافة إلى ذلك، تشير التحليلات إلى أن الهياكل الخشبية، التي تتواجد بكثرة بين مباني Räkna Q، تميل إلى الحصول على قيم تراثية متوقعة أقل. وهذا يشير إلى أن نموذج GPT قد يقلل من أهمية التراث للمباني في البيئات اليومية، وخاصة تلك المبنية من الخشب، على الرغم من الأدبيات المعترف بها التي تقدر قيمتها التراثية. بشكل عام، تسلط النتائج الضوء على التعقيدات والقيود المرتبطة باستخدام التوقعات التي تولدها الذكاء الاصطناعي لتقييمات التراث في سياق تنفيذ EPBD في السويد.

المناقشة

في هذا القسم، يناقش المؤلفون المنهجية والنتائج المتعلقة بدمج معرفات المباني المستمدة من سجلات شهادات أداء الطاقة (EPC) والسجلات العقارية الوطنية لتقييم التراث. حققت الدراسة تغطية عالية من صور المباني، حيث أن 86.6% من المباني لديها صور متاحة، بشكل أساسي من Google Street View، تم التقاطها بين عامي 2019 و2024. استخدم المؤلفون نهجاً منهجياً لتصفية واختيار أفضل مواقع الكاميرا لتحليل الواجهة، مما أدى إلى أن 72% من المباني لديها على الأقل وجهة نظر صالحة واحدة. استخدمت التحليلات نموذج GPT من OpenAI لاستخراج المعلمات المتعلقة بالمباني من 281,018 صورة، مما أدى إلى تحديد 179,538 مبنى تم ملاحظته. أكدت المنهجية على أهمية التحفيز المنظم لتحسين أداء النموذج وشملت التحقق من الخبراء لضمان موثوقية مؤشرات التراث المتوقعة.

تكشف النتائج عن نهج محافظ في تعريف قيم التراث، حيث أن درجات مؤشرات التراث المتوقعة حساسة لاختيارات العتبة. تسلط الدراسة الضوء على التحديات المتعلقة بتوقع قيمة التراث على مستوى البلاد بسبب التباينات الإقليمية في البيانات والتحيزات الكامنة في نماذج الذكاء الاصطناعي، التي تميل إلى تفضيل المناطق الحضرية والثرية. على الرغم من هذه القيود، يجادل المؤلفون بإمكانية الذكاء الاصطناعي لتعزيز الكفاءة في تقييمات التراث مع التحذير من تطبيقه غير النقدي. يدعون إلى دمج إشراف الخبراء في عملية اتخاذ القرار ويقترحون أن تكون طرق الذكاء الاصطناعي مكملة لتقنيات تقييم التراث التقليدية بدلاً من استبدالها. ويختتم المؤلفون بالتأكيد على الحاجة إلى منهجيات مرنة مصممة لتطبيقات محددة في إدارة التراث، فضلاً عن أهمية الاستكشاف المستمر لقدرات الذكاء الاصطناعي في هذا المجال.

Journal: npj Heritage Science, Volume: 14, Issue: 1
DOI: https://doi.org/10.1038/s40494-026-02924-7
Publication Date: 2026-08-26
Author(s): Tim David Johansson et al.
Primary Topic: Cultural Heritage Management and Preservation

Methods

The methods employed in this study are outlined in detail, focusing on the integration and analysis of energy performance certificates (EPCs) for a substantial dataset comprising 178,545 multifamily and 93,629 non-residential buildings. These buildings are spatially linked to a national property register encompassing approximately nine million structures. The methodology utilizes Universally Unique Identifiers and geographic coordinates for effective georeferencing, metadata collection, and sight line calculations. Building footprints and road centerlines were sourced from the Swedish Land Survey (Lantmäteriet), facilitating spatial joins and the generation of façade images.

Despite the extensive coverage provided by EPCs, the reliability of heritage value information within them is questioned, as misclassifications are prevalent, leaving many officially protected heritage buildings unrecognized. To enhance the accuracy of the heritage data, the study incorporates the Database of Built Heritage, which includes over 80,000 buildings, with around 13,000 recognized at the national level. This represents only about 0.15% of the total Swedish building stock. To further address the gaps in heritage representation, the researchers utilized the ‘Räkna Q’ dataset, which documents buildings protected under the Planning and Building Act (PBA) at regional and local levels. This dataset, derived from detailed plans and area regulations since 1987, provides a more comprehensive view of heritage values across Sweden, thus serving as a critical benchmark for validating the study’s methodology.

Results

The results section of the study evaluates the effectiveness of GPT-predicted heritage indicators by comparing them with established ground-truth features and national heritage registers, specifically the Database of Built Heritage and Räkna Q. The analysis reveals that the predicted heritage indicators for Räkna Q buildings, which primarily date from 1921, tend to score below 50, suggesting a conservative bias in the model’s assessment of what constitutes heritage. This is contrasted with the higher scores for nationally protected buildings (Byggnadsminnen), which are generally older (average construction year of 1841) and possess more distinct architectural features.

The study further investigates potential biases in the predicted indicators, particularly concerning geographical and socio-economic factors. It finds that buildings in affluent areas, particularly in Stockholm, are more likely to receive higher heritage scores. Additionally, the analysis indicates that wooden structures, which are prevalent among Räkna Q buildings, tend to receive lower predicted heritage values. This suggests that the GPT model may underrepresent the heritage significance of buildings in everyday environments, particularly those constructed from wood, despite established literature recognizing their heritage value. Overall, the findings highlight the complexities and limitations of using AI-generated predictions for heritage assessments in the context of the EPBD implementation in Sweden.

Discussion

In this section, the authors discuss the methodology and findings related to the integration of building identifiers derived from Energy Performance Certificate (EPC) records and national property registers for heritage assessment. The study achieved a high coverage of building imagery, with 86.6% of buildings having accessible images, primarily from Google Street View, captured between 2019 and 2024. The authors employed a systematic approach to filter and select optimal camera positions for façade analysis, resulting in 72% of buildings having at least one valid viewpoint. The analysis utilized OpenAI’s GPT model to extract building-related parameters from 281,018 images, leading to the identification of 179,538 observed buildings. The methodology emphasized the importance of structured prompting to improve model performance and included expert validation to ensure the reliability of the predicted heritage indicators.

The findings reveal a conservative approach to defining heritage values, with the predicted heritage indicator scores being sensitive to threshold choices. The study highlights the challenges of nationwide heritage value prediction due to regional data discrepancies and the inherent biases of AI models, which tend to favor urban and affluent areas. Despite these limitations, the authors argue for the potential of AI to enhance efficiency in heritage assessments while cautioning against its uncritical application. They advocate for the integration of expert oversight in the decision-making process and suggest that AI methods should complement traditional heritage evaluation techniques rather than replace them. The authors conclude by emphasizing the need for flexible methodologies tailored to specific applications in heritage management, as well as the importance of ongoing exploration of AI’s capabilities in this field.