توقف عن استخدام خطأ الجذر التربيعي كهدف لهطول الأمطار!
Stop using root-mean-square error as a precipitation target!

شارك:
المجلة: Artificial Intelligence for the Earth Systems
DOI: https://doi.org/10.1175/aies-d-25-0083.1
تاريخ النشر: 2026-07-29
المؤلف: Kieran M. R. Hunt
الموضوع الرئيسي: قياس وتحليل الهطول

نظرة عامة

تنتقد الورقة البحثية استخدام خطأ الجذر التربيعي المتوسط (RMSE) كخسارة تدريب افتراضية لنماذج هطول الأمطار المعتمدة على البيانات، مشيرة إلى عدم كفايتها بسبب الطبيعة غير الغاوسية لبيانات الهطول، التي تكون شبه مستمرة، ومضخمة بالصفر، وغير سالبة، وذو ذيول ثقيلة. يقترح المؤلفون انحراف تويدي كبديل مبرر إحصائيًا، وهو دالة خسارة قائمة على الاحتمالية من عائلة التشتت الأسي تتميز بدالة تباين \( V(\mu) = \mu^p \). تستوعب هذه الدالة الخصائص الملحوظة للهطول، بما في ذلك كتلة نقطية عند الصفر وكثافة مستمرة للقيم الإيجابية، خصوصًا لـ \( 1 < p < 2 \)، والذي يتوافق مع توزيع بواسون-غاما المركب. تظهر النتائج التجريبية أن بيانات الهطول عبر تجميعات زمنية مختلفة تنحرف بشكل كبير عن التوزيعات الغاوسية، مع زيادة قوة تويدي \( p \) مع طول التراكم نحو حد غاما. يذكر المؤلفون تحسين الأداء في نماذج التعلم العميق عند استخدام انحراف تويدي بدلاً من RMSE، بما في ذلك تحسين استرجاع الأحداث القصوى وزيادة الدقة في متوسط خطأ القيمة المطلقة (MAE) للبكسلات الرطبة ومعدلات الضرب للبكسلات الجافة في سياقات جغرافية مختلفة. لا يتماشى انحراف تويدي فقط مع الهدف التدريبي مع الخصائص الإحصائية للهطول، بل يقدم أيضًا إطارًا مرنًا يتكيف مع المقاييس المتغيرة. يوصي المؤلفون بتبنيه لمهام تعلم الهطول الحتمية، مؤكدين على إمكانيته في تحسين أداء النموذج، خصوصًا في توقع الأحداث القصوى. تشمل اتجاهات البحث المستقبلية استكشاف حساسية \( p \) وتوسيع النتائج لتشمل أهداف تدريب احتمالية.

مقدمة

تناقش المقدمة تعقيدات نمذجة توزيعات الهطول، التي تتميز بكتلة نقطية كبيرة عند الصفر، ودعم غير سالب، وانحراف إيجابي مع ذيول ثقيلة، مما يشير إلى سلوك غير غاوسي. اقترحت الأدبيات نماذج احتمالية متنوعة لمعالجة هذه الخصائص، تقسم الهطول بشكل أساسي إلى مكونات الشدة والحدوث. تعالج فئة كبيرة من النماذج الهطول كعملية نقطية، مستخدمة عمليات بواسون لوصول الأحداث، بينما تقارب فئة أخرى كميات الفترات الرطبة بتوزيعات غاما، مدعومة بأبحاث إحصائية أساسية ومبررات فيزيائية حديثة.

بعيدًا عن توزيعات بواسون وغاما، تم استكشاف نماذج بديلة مثل خلطات الأسية، توزيعات لوغاريتمية طبيعية، توزيعات ويبول، وتوزيعات كابا، خصوصًا في سياقات محددة مثل معدلات الأمطار المستمدة من الأقمار الصناعية. بالنسبة لأحداث الهطول القصوى، يتم استخدام توزيعات القيمة القصوى العامة (GEV) وتوزيعات باريتو العامة بشكل شائع. نظرًا للتحديات في تحديد شكل بارامتري واحد للهطول، تختار العديد من الدراسات طرق تقييم غير بارامترية أو غير مرتبطة بالتوزيع، مستخدمة درجات مختلفة لتقييم الهيكل المكاني وحدوث الأحداث، بالإضافة إلى تقييمات احتمالية مستمرة، والتي تعتبر حاسمة للتحقق من التوقعات التشغيلية.

مناقشة

في قسم المناقشة، ينتقد المؤلفون الاستخدام الشائع لخطأ المربع المتوسط (MSE) كدالة خسارة لتدريب نماذج هطول الأمطار المعتمدة على البيانات، مشيرين إلى عدم كفايتها في التقاط خصائص بيانات الهطول، التي غالبًا ما تظهر سلوكًا غير غاوسي. يفترض MSE بقايا غاوسية، مما يؤدي إلى تقليل العقوبة على أحداث الهطول الثقيلة النادرة، وإمكانية التنبؤ بهطول الأمطار السلبية، وسوء التعامل مع القيم الصفرية. على الرغم من هذه القيود، لا يزال MSE مستخدمًا على نطاق واسع في تطبيقات مختلفة، بما في ذلك التنبؤ الفوري والتقليص الإحصائي. يشير المؤلفون إلى أن دوال الخسارة البديلة، مثل خسائر مجال التردد أو الخسائر المدركة للارتباط، بدأت تظهر ولكنها ليست بعد ممارسة قياسية.

تدعو الورقة إلى استخدام توزيعات تويدي كبديل أكثر ملاءمة لنمذجة الهطول. يمكن لنماذج تويدي، التي تنتمي إلى عائلة التشتت الأسي، أن تمثل بشكل فعال الطبيعة المضخمة بالصفر والمنحرفة لبيانات الهطول من خلال ربط توزيعات غاوسية وبواسون وغاما. يجادل المؤلفون بأن انحراف تويدي يوفر دالة خسارة متماسكة قائمة على الاحتمالية تتماشى مع الخصائص الإحصائية للهطول، مما يسمح بتدريب أفضل للنموذج. يؤكدون على أن معلمة مؤشر تويدي يمكن تقديرها تجريبيًا وتكييفها مع مقاييس زمنية مختلفة، مما يعزز أداء النموذج في مهام مثل التقليص والتنبؤ الفوري. ستتناول الأقسام التالية من الورقة مزايا توزيعات تويدي وتظهر فعاليتها مقارنةً بـ MSE في التطبيقات العملية.

Journal: Artificial Intelligence for the Earth Systems
DOI: https://doi.org/10.1175/aies-d-25-0083.1
Publication Date: 2026-07-29
Author(s): Kieran M. R. Hunt
Primary Topic: Precipitation Measurement and Analysis

Overview

The research paper critiques the use of root-mean-square error (RMSE) as the default training loss for data-driven precipitation models, highlighting its inadequacy due to the non-Gaussian nature of precipitation data, which is semi-continuous, zero-inflated, non-negative, and heavy-tailed. The authors propose the Tweedie deviance as a statistically justified alternative, which is a likelihood-based loss function from the exponential-dispersion family characterized by a variance function \( V(\mu) = \mu^p \). This function accommodates the observed characteristics of precipitation, including a point mass at zero and a continuous density for positive values, particularly for \( 1 < p < 2 \), which corresponds to a compound Poisson-Gamma distribution. Empirical results demonstrate that precipitation data across various temporal aggregations deviates significantly from Gaussian distributions, with the Tweedie power \( p \) increasing with accumulation length towards a Gamma limit. The authors report improved performance in deep learning models when using Tweedie deviance instead of RMSE, including better extreme recall and enhanced accuracy in wet-pixel mean absolute error (MAE) and dry-pixel hit rates in different geographical contexts. The Tweedie deviance not only aligns the training objective with the statistical properties of precipitation but also offers a flexible framework that adapts to varying scales. The authors recommend its adoption for deterministic precipitation learning tasks, emphasizing its potential to improve model performance, particularly in extreme event prediction. Future research directions include exploring the sensitivity of \( p \) and extending the findings to probabilistic training targets.

Introduction

The introduction discusses the complexities of modeling precipitation distributions, which are characterized by a large point mass at zero, non-negative support, and a positive skew with heavy upper tails, indicating non-Gaussian behavior. The literature has proposed various probabilistic models to address these characteristics, primarily dividing precipitation into intensity and occurrence components. A significant class of models treats precipitation as a point process, utilizing Poisson processes for event arrivals, while another class approximates wet period amounts with Gamma distributions, supported by foundational statistical research and recent physical justifications.

Beyond Poisson and Gamma distributions, alternative models such as mixtures of exponentials, lognormal distributions, Weibull distributions, and kappa distributions have been explored, particularly in specific contexts like satellite-derived rain rates. For extreme precipitation events, generalized extreme-value (GEV) and generalized Pareto distributions are commonly employed. Due to the challenges in identifying a single parametric form for precipitation, many studies opt for non-parametric or distribution-agnostic evaluation methods, employing various scores for assessing spatial structure and event occurrences, as well as continuous probabilistic assessments, which are crucial for validating operational forecasts.

Discussion

In the discussion section, the authors critique the prevalent use of mean-square error (MSE) as a loss function for training data-driven precipitation models, highlighting its inadequacy in capturing the characteristics of precipitation data, which often exhibit non-Gaussian behavior. MSE assumes Gaussian residuals, leading to under-penalization of rare heavy precipitation events, the possibility of negative rainfall predictions, and poor handling of zero values. Despite these limitations, MSE remains widely adopted in various applications, including nowcasting and statistical downscaling. The authors note that alternative loss functions, such as frequency-domain or correlation-aware losses, are emerging but are not yet standard practice.

The paper advocates for the use of Tweedie distributions as a more suitable alternative for modeling precipitation. Tweedie models, which belong to the exponential-dispersion family, can effectively represent the zero-inflated and skewed nature of precipitation data by connecting Gaussian, Poisson, and Gamma distributions. The authors argue that the Tweedie deviance provides a coherent, likelihood-based loss function that aligns with the statistical properties of precipitation, allowing for better model training. They emphasize that the Tweedie index parameter can be empirically estimated and adapted to different temporal scales, thus enhancing the model’s performance in tasks such as downscaling and nowcasting. The subsequent sections of the paper will elaborate on the advantages of Tweedie distributions and demonstrate their effectiveness compared to MSE in practical applications.

شارك: