PATCH: طريقة تعلم عميقة لتقييم تباين الممارسة الفنية في اللوحات التاريخية PATCH: A deep learning method to assess heterogeneity of artistic practice in historical paintings

شارك:
المجلة: Science Advances، المجلد: 12، العدد: 16
DOI: https://doi.org/10.1126/sciadv.aea0485
PMID: https://pubmed.ncbi.nlm.nih.gov/41996503
تاريخ النشر: 2026-04-17
المؤلف: Andrew Van Horn وآخرون
الموضوع الرئيسي: تحليل مواد التراث الثقافي

طرق

في هذا القسم، يصف المؤلفون تطوير طريقة تحليل المناطق الزوجية غير المراقبة لتقييم فعالية نهج PATCH مقابل تقنيات التعلم غير المراقب بالكامل. شمل التحليل تقسيم لوحات الطلاب إلى رقع بحجم 1×1 سم²، مما أسفر عن 180 رقعة لكل لوحة. تم تقييم كل زوج من اللوحات لتحديد ما إذا كان يمكن تصنيفها على أنها من نفس الفنان أو فنانين مختلفين. تم استخدام طريقتين لاستخراج الميزات: تحويل فورييه ثنائي الأبعاد، الذي أبرز تفاصيل ضربات الفرشاة الصغيرة من خلال استبعاد الأطوال الموجية الأكبر، وشبكة عصبية تلافيفية (CNN) VGG16 تم تدريبها على بيانات الارتفاع، مما أسفر عن متجهات ميزات بأحجام 17578 و512، على التوالي.

كما يقوم المؤلفون بتحديد الممارسة الفنية من خلال مقاييس مثل الدرجات الداخلية والخارجية، التي تقيس تماسك المجتمع الداخلي وتشابه المجتمعات الخارجية، على التوالي. يتم تعريف الدرجة الداخلية ($k_{int}$) على أنها المجموع الموزون للحواف داخل مجتمع، يتم تطبيعه بواسطة الحد الأقصى الممكن من الحواف، بينما تقيس الدرجة الخارجية ($k_{ext}(C, C’)$) الاتصالات بين المجتمعات المختلفة. تقيم الدرجة الخارجية الإجمالية ($k_{ext}$) عزل مجتمع عن الآخرين. توفر هذه المقاييس رؤى حول تماسك وتميز الممارسات الفنية، كما هو موضح في تحليل لوحتين من لوحات El Greco، حيث لوحظ عزل كبير لأحد المجتمعات، مما يشير إلى تقنيات أو أغراض فنية مختلفة.

نقاش

يسلط قسم النقاش في الورقة الضوء على التطبيق المبتكر لطريقة التدريب الزوجي لتصنيف التباين (PATCH) في تحليل التاريخ الفني، لا سيما لللوحات المنسوبة إلى El Greco. هذه الدراسة مهمة لأنها تمثل الحالة الأولى لاستخدام PATCH لتحليل كل من اللوحات التجريبية الخاضعة للرقابة والأعمال التاريخية دون الاعتماد على بيانات الحقيقة الأرضية الخارجية. تُظهر الطريقة دقة استثنائية في تحديد الممارسات الفنية وحقوق التأليف ضمن سياقات الورش، حيث قد تكون الأمثلة المعروفة لأعمال الفنانين نادرة. يؤكد المؤلفون على إمكانية PATCH لتعزيز فهم الممارسات الفنية، لا سيما في السياقات التاريخية المعقدة.

تكشف النتائج أن طريقة PATCH تقيس بفعالية تباين الممارسة الفنية (HAP) ضمن مجموعات البيانات، مع هياكل مجتمعية تشير إلى فنانين أو مواد مختلفة. أسفر تحليل أعمال El Greco، “المعمودية” و”المسيح على الصليب”، عن قيم Q تشير إلى درجات متفاوتة من التماسك والتباين. على وجه التحديد، أظهرت الشبكات المستمدة من هذه اللوحات تباينًا منخفضًا، كما هو موضح من خلال قيم Q التي تقل عن العتبة 0.3، بينما أظهرت مجموعة البيانات التجريبية تباينًا أعلى بكثير (Q = 0.875). توفر هذه الفروق في التماسك رؤى حول الترابط بين الممارسات الفنية وإمكانية المشاركة في حقوق التأليف، مما يبرز فائدة PATCH في البحث التاريخي الفني.

Journal: Science Advances, Volume: 12, Issue: 16
DOI: https://doi.org/10.1126/sciadv.aea0485
PMID: https://pubmed.ncbi.nlm.nih.gov/41996503
Publication Date: 2026-04-17
Author(s): Andrew Van Horn et al.
Primary Topic: Cultural Heritage Materials Analysis

Methods

In this section, the authors describe the development of an unsupervised pairwise region analysis method to evaluate the effectiveness of the PATCH approach against fully unsupervised learning techniques. The analysis involved dividing student paintings into 1×1 cm² patches, resulting in 180 patches per painting. Each pair of paintings was assessed to determine if they could be classified as created by the same or different artists. Two feature extraction methods were employed: a 2D Fourier transform, which emphasized smaller brushstroke details by excluding larger wavelengths, and a VGG16 convolutional neural network (CNN) trained on height data, yielding feature vectors of sizes 17578 and 512, respectively.

The authors further quantify artistic practice through metrics such as internal and external degrees, which measure intra-community cohesiveness and inter-community similarity, respectively. The internal degree ($k_{int}$) is defined as the weighted sum of edges within a community, normalized by the maximum possible edges, while the external degree ($k_{ext}(C, C’)$) measures the connections between distinct communities. The total external degree ($k_{ext}$) assesses the isolation of a community from others. These metrics provide insights into the cohesiveness and distinctiveness of artistic practices, as illustrated in the analysis of two El Greco paintings, where significant isolation of one community was observed, indicating differing artistic techniques or purposes.

Discussion

The discussion section of the paper highlights the innovative application of the Pairwise Assignment Training for Classifying Heterogeneity (PATCH) method in art historical analysis, particularly for paintings attributed to El Greco. This study is significant as it represents the first instance of utilizing PATCH to analyze both controlled experimental paintings and historical works without relying on external ground truth data. The method demonstrates exceptional accuracy in identifying artistic practices and authorship within workshop contexts, where known examples of artists’ works may be scarce. The authors emphasize the potential of PATCH to enhance understanding of artistic practices, particularly in complex historical contexts.

The findings reveal that the PATCH method effectively measures the heterogeneity of artistic practice (HAP) within datasets, with community structures indicating different artists or materials. The analysis of El Greco’s works, “The Baptism” and “Christ on the Cross,” yielded Q values that suggest varying degrees of modularity and heterogeneity. Specifically, the networks derived from these paintings exhibited low heterogeneity, as indicated by Q values below the threshold of 0.3, while the experimental dataset showed much higher heterogeneity (Q = 0.875). This variance in modularity provides insights into the interconnectedness of artistic practices and the potential for shared authorship, underscoring the utility of PATCH in art historical research.