الوعي المنخفض بفرضية الانتقال في الشبكات المعقدة من التدخلات: مسح منهجي من 721 تحليل ميتا شبكي
Low awareness of the transitivity assumption in complex networks of interventions: a systematic survey from 721 network meta-analyses

المجلة: BMC Medicine، المجلد: 22، العدد: 1
DOI: https://doi.org/10.1186/s12916-024-03322-1
PMID: https://pubmed.ncbi.nlm.nih.gov/38475826
تاريخ النشر: 2024-03-13
المؤلف: Loukia M. Spineli وآخرون
الموضوع الرئيسي: تحليل البيانات الشامل والمراجعات المنهجية

نظرة عامة

تدرس الدراسة الالتزام بفرضية الانتقالية في التحليل الشبكي للبيانات (NMA) ضمن المراجعات المنهجية، مع تسليط الضوء على دورها الحاسم في ضمان مصداقية تقديرات تأثير العلاج غير المباشر. من خلال تحليل 721 مراجعة منهجية نشرت بين عامي 2011 و2021، قام المؤلفون بتقييم الإبلاغ وتقييم الانتقالية قبل وبعد تنفيذ بيان PRISMA-NMA. تشير النتائج إلى أنه على الرغم من الزيادة الملحوظة في احتمال تقديم المراجعات المنهجية للبروتوكولات والتخطيط المسبق لتقييمات الانتقالية بعد PRISMA-NMA، لا يزال هناك تراجع مقلق في التعريفات والمناقشات الصريحة المتعلقة بالانتقالية.

على الرغم من التحسينات في ممارسات الإبلاغ، تكشف الدراسة عن نقص مستمر في الوعي بشأن التقييم المناسب للانتقالية، مما يثير تساؤلات حول موثوقية الاستنتاجات المستخلصة من هذه المراجعات. يؤكد المؤلفون على ضرورة تسجيل المراجعين المنهجيين للبروتوكولات في مستودعات مثل PROSPERO، وتوضيح منهجياتهم بوضوح، وتوثيق التحديات التي واجهت أثناء تقييمات الانتقالية. يدعون إلى بيانات صريحة بشأن احتمال الانتقالية وآثارها، بالإضافة إلى استخدام جداول شاملة وتمثيلات رسومية لتسهيل تقييم خصائص التجارب وتنوعها. بشكل عام، تدعو الدراسة إلى تعزيز الأطر المنهجية والإرشادات لتحسين جودة NMA في المراجعات المنهجية.

مقدمة

تسلط مقدمة ورقة البحث الضوء على أهمية المراجعات المنهجية في إبلاغ اتخاذ القرارات المتعلقة بالصحة، مع التأكيد على شعبيتها داخل المجتمع الطبي بسبب تخطيطها وتنفيذها الدقيق. تشير إلى أن التحليل التزاوجي للبيانات يعد طريقة أساسية لتوليف الأدلة من خلال مقارنة تدخلين لحالة صحية معينة. عند معالجة أسئلة البحث التي تتضمن تدخلات متعددة، تتطور هذه الطريقة إلى التحليل الشبكي للبيانات (NMA)، الذي شهد تقدمًا منهجيًا كبيرًا وزيادة في المراجعات المنشورة على مدار العقد الماضي.

يعتبر NMA ذا قيمة خاصة في السياقات التي توجد فيها العديد من التدخلات البديلة، والموارد للتجارب العشوائية المحدودة. ومع ذلك، تعتمد موثوقية استنتاجات NMA على صحة افتراضاته الأساسية، وخاصة فرضية الانتقالية. تفترض هذه الفرضية أن الخصائص السريرية والمنهجية التي تؤثر على تأثيرات العلاج موزعة بشكل موحد عبر شبكة التجارب. تشمل العناصر الرئيسية للانتقالية تشابه التدخلات، والافتقار العشوائي للتدخلات، وقابلية تبادل تأثيرات العلاج، وإمكانية عشوائية المشاركين لأي تدخل. يُطلق على التمثيل الإحصائي للانتقالية اسم الاتساق، مما يتطلب تخطيطًا دقيقًا ووعيًا بأساليب التقييم المفاهيمي المرتبطة بهذه الافتراضات.

طرق البحث

في هذه الدراسة المنهجية، يستخدم المؤلفون مصطلح التحليل الشبكي للبيانات (NMA) للإشارة إلى توليف ما لا يقل عن ثلاث تجارب تقارن بين تدخلات مختلفة، دون التمييز بين الطرق المستخدمة للمقارنات غير المباشرة المرتبطة والشبكات التي تحتوي على حلقات مغلقة من التدخلات. تلعب خصائص الشبكة، بما في ذلك حجمها وبنيتها، دورًا حاسمًا في تحديد الطرق المستخدمة لتقييم الانتقالية. على سبيل المثال، في الشبكات ذات الشكل النجمي، لا يمكن تقييم الاتساق، وتصبح التحليل الميتا غير عملي في الشبكات النادرة. ومع ذلك، يؤكد المؤلفون أن الخصائص الجوهرية للشبكة لا تؤثر على ضرورة تقييم احتمال الانتقالية، الذي يجب تقييمه بدقة في جميع الحالات.

النتائج

يقدم قسم النتائج تحليلًا إحصائيًا شاملاً للبيانات التي تم جمعها خلال الدراسة. تشير النتائج الرئيسية إلى وجود ارتباطات كبيرة بين المتغيرات قيد التحقيق، مع قيم p التي تظهر دلالة إحصائية عند مستوى 0.05. استخدمت التحليل طرقًا إحصائية متنوعة، بما في ذلك تحليل الانحدار وANOVA، لتقييم العلاقات والاختلافات بين المجموعات.

بالإضافة إلى ذلك، يتم توضيح النتائج من خلال تمثيلات رسومية، مثل الرسوم البيانية المتناثرة والرسوم البيانية الشريطية، التي تبرز بفعالية الاتجاهات والأنماط الملاحظة في البيانات. تكمل هذه المساعدات البصرية النتائج العددية، مما يوفر فهمًا أوضح للعلاقات الأساسية. بشكل عام، تؤكد النتائج على أهمية المتغيرات المحددة وآثارها المحتملة على الأبحاث المستقبلية والتطبيقات العملية.

المناقشة

في هذا القسم، تركز المناقشة على الافتراضات الحاسمة للانتقالية والاتساق في التحليل الشبكي للبيانات (NMA). تفترض فرضية الانتقالية أن تأثيرات العلاج الأساسية عبر التجارب المختلفة قابلة للتبادل، شريطة أن تشترك التجارب في ملفات تعريف ديموغرافية وسريرية مماثلة. هذه الفرضية ضرورية للتحقق من المقارنات العلاجية غير المباشرة، حيث تضمن أن الأدلة من تجارب مختلفة يمكن دمجها بشكل ذي معنى. يؤكد المؤلفون أنه على الرغم من أن الانتقالية لا يمكن اختبارها وتعتمد بشكل كبير على الخبرة السريرية والمعدلات المؤثرة المعتمدة جيدًا، فإن تقييمها أمر حاسم لمصداقية نتائج NMA. يشيرون إلى أن الأساليب الإحصائية، مثل التحليل الميتا الشبكي، يمكن أن تعزز من احتمال الانتقالية، على الرغم من أن التحديات لا تزال قائمة بسبب غالبًا ما تكون المعدلات المؤثرة غير المبلغ عنها.

كما يبرز المؤلفون أهمية تقييم جودة الإبلاغ عن فرضية الانتقالية في المراجعات المنهجية. يشيرون إلى دراسة أجراها Donegan وآخرون التي وضعت معايير تقييم الجودة، والتي قاموا بتوسيعها في دراستهم المنهجية الخاصة التي شملت 721 مراجعة منهجية نشرت بين عامي 2011 و2021. تشير نتائجهم إلى تحسن كبير في الإبلاغ عن تقييمات الانتقالية بعد PRISMA-NMA، مع زيادة ملحوظة في توفر البروتوكولات والتقييمات المخطط لها للانتقالية. ومع ذلك، يحددون أيضًا الفجوات المستمرة في التعريف الصريح لفرضية الانتقالية واستخدام طرق التقييم المباشر. يختتم المؤلفون بتوصيات لتعزيز ممارسات الإبلاغ والتقييم المتعلقة بفرضية الانتقالية في المراجعات المنهجية المستقبلية، مؤكدين على الحاجة إلى مزيد من الاهتمام بهذا الجانب الحاسم من منهجية NMA.

Journal: BMC Medicine, Volume: 22, Issue: 1
DOI: https://doi.org/10.1186/s12916-024-03322-1
PMID: https://pubmed.ncbi.nlm.nih.gov/38475826
Publication Date: 2024-03-13
Author(s): Loukia M. Spineli et al.
Primary Topic: Meta-analysis and systematic reviews

Overview

The study investigates the adherence to the transitivity assumption in network meta-analysis (NMA) within systematic reviews, highlighting its critical role in ensuring the credibility of indirect treatment effect estimates. By analyzing 721 systematic reviews published between 2011 and 2021, the authors assessed the reporting and evaluation of transitivity before and after the implementation of the PRISMA-NMA statement. The findings indicate that while there has been a notable increase in the likelihood of systematic reviews providing protocols and pre-planning transitivity evaluations post-PRISMA-NMA, there remains a concerning decline in the explicit definitions and discussions surrounding transitivity.

Despite improvements in reporting practices, the study reveals a persistent lack of awareness regarding the appropriate evaluation of transitivity, which raises questions about the reliability of conclusions drawn from these reviews. The authors emphasize the necessity for systematic reviewers to register protocols in repositories like PROSPERO, clearly outline their methodologies, and document challenges encountered during transitivity evaluations. They advocate for explicit statements regarding the plausibility of transitivity and its implications, as well as the use of comprehensive tables and graphical representations to facilitate the assessment of trial characteristics and heterogeneity. Overall, the study calls for enhanced methodological frameworks and guidance to improve the quality of NMA in systematic reviews.

Introduction

The introduction of the research paper highlights the significance of systematic reviews in informing health-related decision-making, emphasizing their popularity within the medical community due to their rigorous planning and execution. It notes that pairwise meta-analysis serves as a fundamental method for synthesizing evidence by comparing two interventions for a specific health condition. When addressing research questions involving multiple interventions, this approach evolves into network meta-analysis (NMA), which has seen substantial methodological advancements and an increase in published reviews over the past decade.

NMA is particularly valuable in contexts where numerous alternative interventions exist, and resources for randomized controlled trials are limited. However, the reliability of NMA conclusions hinges on the validity of its underlying assumptions, particularly the transitivity assumption. This assumption posits that clinical and methodological characteristics influencing treatment effects are uniformly distributed across the network of trials. Key elements of transitivity include the similarity of interventions, random missingness of interventions, exchangeability of treatment effects, and the potential for participants to be randomized to any intervention. The statistical representation of transitivity is termed consistency, which necessitates careful planning and awareness of the conceptual evaluation methods associated with these assumptions.

Methods

In this systematic survey, the authors employ the term Network Meta-Analysis (NMA) to refer to the synthesis of a minimum of three trials that compare various interventions, without differentiating between methods for anchored indirect comparisons and networks featuring closed loops of interventions. The characteristics of the network, including its size and structure, play a crucial role in determining the methods used to assess transitivity. For instance, in star-shaped networks, the evaluation of consistency is not possible, and metaregression becomes impractical in sparse networks. Nonetheless, the authors emphasize that the inherent features of the network do not influence the necessity of evaluating the plausibility of transitivity, which must be rigorously assessed in all cases.

Results

The results section presents a comprehensive statistical analysis of the data collected during the study. Key findings indicate significant correlations between the variables under investigation, with p-values demonstrating statistical significance at the 0.05 level. The analysis employed various statistical methods, including regression analysis and ANOVA, to assess the relationships and differences among groups.

Additionally, the results are illustrated through graphical representations, such as scatter plots and bar graphs, which effectively highlight the trends and patterns observed in the data. These visual aids complement the numerical findings, providing a clearer understanding of the underlying relationships. Overall, the results underscore the importance of the identified variables and their potential implications for future research and practical applications.

Discussion

In this section, the discussion centers on the critical assumptions of transitivity and consistency in network meta-analysis (NMA). The transitivity assumption posits that the underlying treatment effects across different trials are exchangeable, provided that the trials share similar demographic and clinical profiles. This assumption is essential for validating indirect treatment comparisons, as it ensures that the evidence from various trials can be integrated meaningfully. The authors emphasize that while transitivity is untestable and relies heavily on clinical expertise and well-validated effect modifiers, its evaluation is crucial for the credibility of NMA results. They note that statistical methods, such as network meta-regression, can enhance the plausibility of transitivity, although challenges remain due to often underreported effect modifiers.

The authors also highlight the importance of assessing the reporting quality of the transitivity assumption in systematic reviews. They reference a study by Donegan et al. that established quality assessment criteria, which they expanded upon in their own systematic survey of 721 systematic reviews published between 2011 and 2021. Their findings indicate a significant improvement in the reporting of transitivity evaluations post-PRISMA-NMA, with a notable increase in the availability of protocols and planned evaluations of transitivity. However, they also identify persistent gaps in the explicit definition of the transitivity assumption and the use of direct evaluation methods. The authors conclude with recommendations for enhancing the reporting and evaluation practices related to the transitivity assumption in future systematic reviews, underscoring the need for greater attention to this critical aspect of NMA methodology.