DOI: https://doi.org/10.1136/bmj-2023-076123
PMID: https://pubmed.ncbi.nlm.nih.gov/38195116
تاريخ النشر: 2024-01-09
المؤلف: Florian Naudet وآخرون
الموضوع الرئيسي: تحليل البيانات الشامل والمراجعات المنهجية
نظرة عامة
تؤكد هذه القسم على ضرورة الشفافية والموثوقية في استخدام البيانات التي يتم جمعها بانتظام في البحث. يقترح أن تنفيذ نظام تسجيل يمكن أن يعزز هذه الصفات، بينما يعالج أيضًا الحاجة إلى التوازن بين التفاصيل المطلوبة للدراسات الملاحظة والمرونة المتأصلة في مثل هذه المنهجيات البحثية.
علاوة على ذلك، يُقترح إنشاء مستودع مركزي كوسيلة لتقليل التكرار، وتسهيل وصول المستخدمين، وتعزيز المساءلة. سيلعب هذا المستودع أيضًا دورًا حاسمًا في إبلاغ المشاركين بكيفية استخدام بياناتهم الشخصية، مما يعزز الثقة والمعايير الأخلاقية في ممارسات البحث.
مقدمة
تسلط المقدمة الضوء على الاعتماد المتزايد للسلطات الصحية على التجارب غير العشوائية والدراسات الملاحظة لاتخاذ قرارات حاسمة، مثل الجرعات المعززة لفيروس COVID-19 والعلاجات الجديدة للسرطان. تحدد التحديات المنهجية الكبيرة، وخاصة التداخل المتبقي، وتؤكد على الحاجة إلى تحسين الشفافية والموثوقية والمساءلة في البحث الملاحظ. يدعو المؤلفون إلى تسجيل هذه الدراسات – وهو ممارسة علمية مفتوحة تتضمن تحديد فرضيات البحث، وعناصر تصميم الدراسة، والتحليلات الإحصائية في مستودع مركزي – مشابهة للمعايير الحالية للتجارب السريرية.
بينما يجادل بعض النقاد بأن التسجيل للدراسات الملاحظة قد يكون غير واقعي وقد يؤدي إلى عدم الأمانة العلمية، يؤكد المؤلفون أن إمكانية النتائج المضللة تتطلب الالتزام بمعايير جودة صارمة. ويؤكدون أنه إذا كانت الدراسات الملاحظة ستؤثر على القرارات التنظيمية أو السياسات العامة، فيجب أن تخضع لنفس متطلبات التسجيل مثل الدراسات التدخلية. تقترح الورقة أن توسيع ممارسات التسجيل يمكن أن يعزز مصداقية البحث الملاحظ، مما يقلل من المخاطر المرتبطة بالنتائج غير الموثوقة والانتقادات غير المبررة.
النتائج
تؤكد قسم النتائج على أهمية تسجيل الدراسة في تعزيز موثوقية وشفافية نتائج البحث، خاصة في الدراسات الملاحظة حيث يمكن أن تؤدي المرونة التحليلية إلى نتائج متنوعة. قد يشارك الباحثون في الإبلاغ الانتقائي أو “قرصنة p”، حيث يختارون استراتيجيات التحليل بعد الحدث للحصول على نتائج أكثر ملاءمة، مما يزيد من خطر النتائج الإيجابية الكاذبة والنتائج الزائفة. بينما لا يلغي التسجيل المرونة التحليلية، فإنه يعزز الشفافية من خلال توثيق القرارات التحليلية المحددة مسبقًا، مما يقلل من احتمال النتائج المضللة.
تسلط القسم الضوء على أن التجارب السريرية المسجلة تميل إلى الإبلاغ عن نتائج سلبية بشكل أكثر تكرارًا من تلك غير المسجلة، مع أدلة تشير إلى معدلات تكرار أعلى في العلوم الاجتماعية والسلوكية المرتبطة بالتسجيل. ومع ذلك، فإن عدم وجود ممارسات تسجيل متسقة يترك العديد من التحليلات غير منشورة ويخفي مدى التحيزات الناتجة عن الإبلاغ الانتقائي. على سبيل المثال، تم نشر 40% فقط من الدراسات الملاحظة التي تحتوي على نتائج سلامة مسجلة في ClinicalTrials.gov بعد 30 شهرًا، والاختلافات بين النتائج المسجلة والمنشورة في التجارب السريرية شائعة، بمعدلات حوالي 30%. تدعو النص إلى تحسين ممارسات التسجيل، بما في ذلك تحديد خطط التحليل الإحصائي، للتخفيف من هذه القضايا وتعزيز نزاهة نتائج البحث.
المناقشة
تسلط المناقشة الضوء على المشهد المتطور للدراسات الملاحظة، خاصة في سياق مسارات الموافقة المعجلة التي تسمح بالموافقات المشروطة بناءً على التجارب غير العشوائية. يتم التأكيد على الاستخدام المتزايد لمجموعات البيانات التي يتم جمعها بانتظام كمصادر بيانات رئيسية أو مكملة، حيث يمكن أن تعالج الشكوك التي تنشأ من التجارب العشوائية المضبوطة التقليدية (RCTs). تسمح المرونة المتأصلة في البحث الملاحظ بأساليب تحليلية متنوعة، مما يتناقض مع الهيكل الصارم للدراسات التدخلية التي تحكمها لوائح صارمة. ومع ذلك، فإن هذه المرونة تتطلب أيضًا عملية تسجيل قوية مصممة خصيصًا للدراسات الملاحظة، والتي يجب أن تشمل فرضيات مفصلة، ونماذج سببية، واستراتيجيات للتعامل مع البيانات.
تدعو الورقة إلى تكييف أدوات التسجيل الحالية لتناسب بشكل أفضل الخصائص الفريدة للبحث الملاحظ. تقترح أن التسجيل يمكن أن يعزز المساءلة والشفافية، مما يعود بالنفع على كل من الباحثين والمرضى من خلال توفير مستودع مركزي للتحليلات. يتم تناول المخاوف بشأن تسجيل يعيق الاستكشاف، حيث يُجادل بأنه يمكن أن يحسن فعليًا من الصرامة المنهجية والكفاءة. يدعو المؤلفون إلى جهود تعاونية بين أصحاب المصلحة لوضع معايير مرنة لتسجيل الدراسات الملاحظة، تتماشى مع الحركات الأوسع نحو نزاهة البحث وممارسات العلوم المفتوحة. تهدف هذه المقاربة إلى ضمان أن يلبي البحث الملاحظ التوقعات الناشئة للشفافية والمساءلة في الاستقصاء العلمي.
DOI: https://doi.org/10.1136/bmj-2023-076123
PMID: https://pubmed.ncbi.nlm.nih.gov/38195116
Publication Date: 2024-01-09
Author(s): Florian Naudet et al.
Primary Topic: Meta-analysis and systematic reviews
Overview
The section emphasizes the necessity for transparency and reliability in the utilization of routinely collected data in research. It suggests that implementing a registration system could enhance these attributes, while also addressing the need for a balance between the detail required for observational studies and the flexibility inherent in such research methodologies.
Furthermore, the establishment of a centralized repository is proposed as a means to minimize redundancy, facilitate user access, and bolster accountability. This repository would also play a crucial role in informing participants about how their personal data is being utilized, thereby fostering trust and ethical standards in research practices.
Introduction
The introduction highlights the growing reliance of health authorities on nonrandomized trials and observational studies for critical decisions, such as booster doses for COVID-19 and novel cancer therapies. It identifies significant methodological challenges, particularly residual confounding, and emphasizes the need for improved transparency, reliability, and accountability in observational research. The authors advocate for the registration of these studies—an open science practice that involves pre-specifying research hypotheses, study design elements, and statistical analyses in a centralized repository—similar to the existing norms for clinical trials.
While some critics argue that registration for observational studies may be unrealistic and could lead to scientific dishonesty, the authors contend that the potential for misleading findings necessitates adherence to rigorous quality standards. They assert that if observational studies are to inform regulatory or public policy decisions, they should be subject to the same registration requirements as interventional studies. The paper suggests that expanding registration practices could enhance the credibility of observational research, thereby mitigating the risks associated with unreliable findings and unjustified criticisms.
Results
The results section emphasizes the importance of study registration in enhancing the reliability and transparency of research findings, particularly in observational studies where analytical flexibility can lead to varied outcomes. Researchers may engage in selective reporting or “p-hacking,” where they choose analysis strategies post hoc to yield more favorable results, increasing the risk of false positives and spurious findings. While registration does not eliminate analytical flexibility, it promotes transparency by documenting prespecified analytical decisions, thereby reducing the likelihood of misleading results.
The section highlights that registered clinical trials tend to report negative results more frequently than unregistered ones, with evidence suggesting higher replication rates in social and behavioral sciences associated with registration. However, the lack of consistent registration practices leaves many analyses unpublished and obscures the extent of biases from selective reporting. For instance, only 40% of observational studies with safety outcomes registered at ClinicalTrials.gov were published after 30 months, and discrepancies between registered and published outcomes in clinical trials are common, with rates around 30%. The text calls for improved registration practices, including the specification of statistical analysis plans, to mitigate these issues and enhance the integrity of research findings.
Discussion
The discussion highlights the evolving landscape of observational studies, particularly in the context of accelerated approval pathways that allow for conditional approvals based on non-randomized trials. The increasing use of routinely collected datasets as primary or complementary data sources is emphasized, as they can address uncertainties that arise from traditional randomized controlled trials (RCTs). The flexibility inherent in observational research allows for diverse analytical approaches, which contrasts with the rigid structure of interventional studies governed by strict regulations. However, this flexibility also necessitates a robust registration process tailored to observational studies, which should include detailed hypotheses, causal models, and strategies for data handling.
The paper advocates for adapting existing registration tools to better accommodate the unique characteristics of observational research. It suggests that registration can enhance accountability and transparency, benefiting both researchers and patients by providing a centralized repository of analyses. Concerns regarding registration stifling exploration are addressed, arguing that it can actually improve methodological rigor and efficiency. The authors call for collaborative efforts among stakeholders to establish flexible standards for observational study registration, aligning with broader movements towards research integrity and open science practices. This approach aims to ensure that observational research meets emerging expectations for transparency and accountability in scientific inquiry.