نمذجة القيم المتطرفة مع توزيعات باريتو المعممة للبيانات المدورة Extreme Value Modeling with Generalized Pareto Distributions for Rounded Data

شارك:
المجلة: The New England Journal of Statistics in Data Science
DOI: https://doi.org/10.51387/26-nejsds101
تاريخ النشر: 2026-01-01
المؤلف: Sai Ma وآخرون
الموضوع الرئيسي: تقدير التوزيع الإحصائي وتطبيقاته

نظرة عامة

في هذا القسم، يستقصي المؤلفون آثار تقريب البيانات، وهو شكل من أشكال التكميم، على تحليل القيم المتطرفة، مع التركيز بشكل خاص على الاستدلالات الإحصائية التي تتجاوز تقدير النقطة. يقترحون معالجة البيانات المقربة كبيانات مقيدة بالفترات، مما يسمح بتطوير مقدرات الاحتمالية القصوى (MLE) لبارامترات النموذج التي تكون غير متحيزة وكفؤة بشكل تقاربي. بالإضافة إلى ذلك، يقوم المؤلفون بتكييف اختبارات جودة الملاءمة التقليدية، مثل اختبار أندرسون-دارلينغ، لاستيعاب البيانات المقربة، مما يضمن أن هذه الاختبارات تحافظ على أحجام مناسبة وتظهر قوة كبيرة.

يتم توضيح التطبيق العملي لهذه الأساليب من خلال دراسة محاكاة باستخدام بيانات مقربة من توزيعات باريتو العامة. علاوة على ذلك، يقوم المؤلفون بتطبيق نهج التقدير واختبارات جودة الملاءمة على بيانات هطول الأمطار من 18 محطة في شرق واشنطن، وهي منطقة تتميز بانخفاض هطول الأمطار وتأثيرات تقريب كبيرة. تشير النتائج إلى أن هذه المنهجية تنتج تقديرات ضيقة للفترات لمستويات العائد، مما يبرز فعاليتها في تحليل القيم المتطرفة.

مقدمة

تؤكد مقدمة الورقة على الأهمية الحاسمة لنمذجة القيم المتطرفة بدقة في مجالات مثل علوم المناخ وتقييم المخاطر، لا سيما لتقدير مستويات العائد التي تُعلم تخطيط البنية التحتية وقرارات السياسة. تسلط الضوء على التحديات التي تطرحها تقريب البيانات، والتي يمكن أن تحيز الاستدلال الإحصائي القياسي، خاصة في عملية اختيار العتبة الآلية لنمذجة توزيع باريتو العام (GPD). ينتقد المؤلفون الحل الشائع المتمثل في الاهتزاز، وهو طريقة التقدير المتعدد، مشيرين إلى قيودها في إنتاج تقديرات نقطية موثوقة واختبارات جودة الملاءمة، خاصة في ظل ظروف التكميم.

تحدد الورقة فجوة في الأدبيات بشأن الفحص المنهجي لتقدير هطول الأمطار الشديد تحت مستويات تقريب مختلفة، خاصة للمتغيرات المستمرة المقربة إلى مستويات أدق. توضح الأساليب الإحصائية الحالية للتعامل مع البيانات المقربة، والتي كانت إلى حد كبير غير مستغلة في نمذجة القيم المتطرفة. يقترح المؤلفون نهجًا جديدًا يعظم الاحتمالية الحقيقية للبيانات المقربة الملاحظة باستخدام التقييد بالفترات ويكيف اختبارات جودة الملاءمة القياسية للبيانات المتقطعة. يقدمون ثلاث مساهمات رئيسية: تصحيح التحيز في تقدير المعلمات، وتطوير اختبارات جودة ملاءمة صالحة بقوة أعلى، وإظهار كيف تؤثر هذه الاختبارات على اختيار العتبة الآلية. تشير النتائج من محاكاة واسعة النطاق إلى أن أساليبهم تنتج تقديرات احتمالية قصوى غير متحيزة (MLEs) وتحافظ على أحجام اختبارات مناسبة، مما يؤدي في النهاية إلى اختلافات كبيرة في تقديرات مستويات العائد لبيانات هطول الأمطار في شرق واشنطن.

مناقشة

في هذا القسم، يناقش المؤلفون آثار أخطاء التقريب في تحليل القيم المتطرفة، خاصة عند تقدير بارامترات توزيع باريتو العام (GPD) بناءً على تجاوزات العتبة. يؤكدون أن الأساليب التقليدية، التي تعالج البيانات المقربة كبيانات مستمرة، يمكن أن تؤدي إلى تحيزات كبيرة في تقدير المعلمات. تُظهر طريقة تقدير الاحتمالية القصوى (MLE) المقترحة، التي تأخذ في الاعتبار التقريب من خلال دالة احتمالية متقطعة، عدم التحيز والتوزيع الطبيعي تحت ظروف معينة. يقدم المؤلفون صياغة مفصلة لدالة اللوغاريتم الاحتمالية ويبرزون أهمية استخدام الاحتمالية الصحيحة لتجنب التحيزات المرتبطة بالأساليب الساذجة.

يقيم القسم أيضًا أداء اختبارات جودة الملاءمة المختلفة، بما في ذلك اختبار كاي-مربع، واختبار كولموغوروف-سميرنوف، واختبار كرامر-فون ميس، واختبار أندرسون-دارلينغ، المعدلة للبيانات المتقطعة. يجد المؤلفون أن الاختبارين الأخيرين يظهران قوة تفوق اختبار كاي-مربع، خاصة عندما تنحرف البيانات عن GPD. تؤكد دراسة عددية الأساليب المقترحة، حيث تظهر أن MLE المستندة إلى التقييد بالفترات (MLE-IC) تتفوق باستمرار على MLE الساذجة (MLE-N) من حيث التحيز ومتوسط الخطأ التربيعي، خاصة تحت مستويات تقريب أعلى. توضح تطبيق هذه الأساليب على بيانات هطول الأمطار اليومية من ولاية واشنطن الشرقية الأهمية العملية لأخذ التقريب في الاعتبار، مما يؤدي إلى اختيار عتبات أكثر دقة وتقدير المعلمات في تحليلات القيم المتطرفة. بشكل عام، يجادل المؤلفون بأن نهجهم يوفر إطارًا قويًا لمعالجة آثار التقريب في نظرية القيم المتطرفة، مع قابلية تطبيق واسعة في مجالات مثل الأرصاد الجوية وعلوم البيئة.

Journal: The New England Journal of Statistics in Data Science
DOI: https://doi.org/10.51387/26-nejsds101
Publication Date: 2026-01-01
Author(s): Sai Ma et al.
Primary Topic: Statistical Distribution Estimation and Applications

Overview

In this section, the authors investigate the effects of data rounding, a form of quantization, on extreme value analysis, particularly focusing on statistical inferences beyond point estimation. They propose treating rounded data as interval-censored, which allows for the development of maximum likelihood estimators (MLE) for model parameters that are asymptotically unbiased and efficient. Additionally, the authors adapt traditional goodness-of-fit tests, such as the Anderson-Darling test, to accommodate rounded data, ensuring that these tests maintain appropriate sizes and exhibit substantial power.

The practical application of these methods is illustrated through a simulation study using data rounded from generalized Pareto distributions. Furthermore, the authors apply their estimation approach and goodness-of-fit tests to precipitation data from 18 stations in eastern Washington, a region characterized by low precipitation and significant rounding effects. The results indicate that this methodology yields narrower interval estimates of return levels, highlighting its effectiveness in extreme value analysis.

Introduction

The introduction of the paper emphasizes the critical importance of accurate extreme value modeling in fields such as climate science and risk assessment, particularly for return level estimation that informs infrastructure planning and policy decisions. It highlights the challenges posed by data rounding, which can bias standard statistical inference, especially in the automated threshold selection process for generalized Pareto distribution (GPD) modeling. The authors critique the common workaround of jittering, a multiple-imputation method, noting its limitations in producing reliable point estimates and goodness-of-fit tests, particularly under conditions of quantization.

The paper identifies a gap in the literature regarding the systematic examination of extreme precipitation estimation under various rounding levels, particularly for continuous variables rounded to finer levels. It outlines the existing statistical methods for handling rounded data, which have largely been underutilized in extreme value modeling. The authors propose a novel approach that maximizes the true likelihood of observed rounded data using interval censoring and adapts standard goodness-of-fit tests for discrete data. They present three key contributions: bias correction in parameter estimation, the development of valid goodness-of-fit tests with higher power, and the demonstration of how these tests influence automated threshold selection. The results from extensive simulations indicate that their methods yield unbiased maximum likelihood estimates (MLEs) and maintain appropriate test sizes, ultimately leading to significant differences in return level estimations for precipitation data in eastern Washington.

Discussion

In this section, the authors discuss the implications of rounding errors in extreme value analysis, particularly when estimating parameters of the Generalized Pareto Distribution (GPD) based on threshold exceedances. They emphasize that traditional methods, which treat rounded data as continuous, can lead to significant biases in parameter estimation. The proposed Maximum Likelihood Estimation (MLE) method, which accounts for rounding through a discretized likelihood function, demonstrates asymptotic unbiasedness and normality under certain conditions. The authors provide a detailed formulation of the log-likelihood function and highlight the importance of using the correct likelihood to avoid biases associated with naive approaches.

The section also evaluates the performance of various goodness-of-fit tests, including Chi-Squared, Kolmogorov-Smirnov, Cramér-von Mises, and Anderson-Darling tests, adapted for discrete data. The authors find that the latter two tests exhibit superior power compared to the Chi-Squared test, particularly when the data deviate from the GPD. A numerical study validates the proposed methods, showing that the MLE based on interval censoring (MLE-IC) consistently outperforms the naive MLE (MLE-N) in terms of bias and mean squared error, especially under higher rounding levels. The application of these methods to daily precipitation data from eastern Washington State illustrates the practical significance of accounting for rounding, leading to more accurate threshold selection and parameter estimation in extreme value analyses. Overall, the authors argue that their approach provides a robust framework for addressing rounding effects in extreme value theory, with broad applicability in fields such as meteorology and environmental science.