DOI: https://doi.org/10.1590/1807-3107bor-2025.vol39.045
PMID: https://pubmed.ncbi.nlm.nih.gov/40396849
تاريخ النشر: 2025-01-01
المؤلف: Raquel Conceição Ferreira وآخرون
الموضوع الرئيسي: البحث في طب الأسنان وكوفيد-19
نظرة عامة
تتناول هذه الدراسة المنهجية إنشاء وتطبيق أدوات تكنولوجية للتدريب والتقويم عبر الإنترنت لأطباء الأسنان المشاركين في مسح SB Brasil 2023، باستخدام منصة Moodle®. شمل عملية التقويم 10 و25 مجموعة من الصور لتقييم حالات الأسنان المختلفة، بما في ذلك حالة التيجان السنية (المقاسة بواسطة مؤشرات dmft وDMFT)، عواقب تسوس الأسنان (مؤشر pufa/PUFA)، سوء الإطباق (المقيم من خلال علاقة الكلاب، والزيادة في المسافة، والعضة الزائدة، والعضة المتقاطعة الخلفية، ومؤشر الجمال السني)، وإصابات الأسنان، وفقًا لمعايير منظمة الصحة العالمية أو SB Brasil 2010. تم تطوير برنامج مخصص لتسهيل تسجيل الرموز، وأتمتة حساب معاملات الاتفاق (بما في ذلك النسبة المئوية العامة، والدرجات المحددة، وكابا البسيطة والموزونة)، وتوليد تقارير مفصلة.
شملت الدراسة 1,513 فاحصًا، من بينهم 728 حققوا اتفاقًا كبيرًا أو أعلى (كابا ≥ 0.61) عبر جميع الحالات التي تم تقييمها. سلطت التقارير الفردية الضوء على التباينات وتتبعت محاولات التقويم، كاشفة أن حالات الإطباق أظهرت أدنى معدلات اتفاق شبه مثالي، مما استلزم المزيد من المحاولات لتحقيق تقويم ناجح. تؤكد النتائج فعالية الأدوات التكنولوجية المنفذة في تمكين التدريب والتقويم عبر الإنترنت، مما يعزز التناسق بين الفاحصين في العمل الميداني. تُظهر هذه الطريقة جدوى استراتيجيات التقويم عن بُعد في المسوحات الوبائية، مما يفيد بشكل خاص في إدارة العديد من الفاحصين عبر مواقع جغرافية متنوعة، مع تداعيات لتطبيقات أوسع في سياقات صحية مختلفة.
مقدمة
تناقش مقدمة ورقة البحث أهمية المسوحات الصحية الفموية القائمة على السكان في تقدير انتشار الحالات الرئيسية للصحة الفموية، والتي تعتبر حاسمة لإبلاغ السياسات العامة وتخطيط خدمات الأسنان. تواجه هذه المسوحات تحديات، خاصة فيما يتعلق بمشاركة العديد من الفاحصين، مما يستلزم معايير تشخيصية موحدة لضمان موثوقية وصدق النتائج. لقد دعت منظمة الصحة العالمية (WHO) إلى بروتوكولات التدريب والتقويم منذ التسعينيات لتوحيد التفسيرات التشخيصية بين الفاحصين، مما يقلل من التباين ويضمن الالتزام المتسق بالمعايير.
تقدم طرق التقويم التقليدية، التي تتمثل أساسًا في الفحوصات السريرية الحية، تحديات لوجستية وأخلاقية، خاصة في البيئات ذات الموارد المحدودة أو مع مجموعات سكانية معينة مثل الأطفال الصغار والأفراد ذوي الإعاقة. لمعالجة هذه القضايا، تم اقتراح طريقة in-lux، التي تستخدم سجلات فوتوغرافية عالية الجودة لحالات الأسنان، وتم تنفيذها بنجاح في مسوحات مختلفة، بما في ذلك المسح الصحي الفموي البرازيلي (SB Brasil 2010). لا تعزز هذه الطريقة الجدوى فحسب، بل تسمح أيضًا بتقويم فعال للعديد من الفاحصين، وتقلل من التكاليف اللوجستية، وتخفف من المخاوف الأخلاقية. كما أدى إدخال التقنيات الرقمية خلال جائحة COVID-19 إلى دفع تكيف عمليات التدريب والتقويم مع الصيغ عبر الإنترنت، مما أسفر عن تطوير برنامج تقويم ونظام إدارة بيانات لمسح SB Brasil 2023، والذي تم تفصيله في المقال.
طرق
تركز هذه الدراسة المنهجية على تطوير وتنفيذ أدوات تكنولوجية تهدف إلى تدريب وتقويم الفاحصين لمبادرة SB Brasil 2023، التي تنسقها وزارة الصحة البرازيلية. من المقرر أن تتم مرحلة جمع البيانات في عامي 2023 و2024، لضمان تقييم شامل لفعالية الأدوات في البيئات الواقعية.
تم تطوير واختبار الأداة التكنولوجية على مدى فترة من يونيو 2020 إلى أغسطس 2021، مما يبرز نهجًا منظمًا للابتكار في تدريب الفاحصين. تؤكد هذه الجدول الزمني الالتزام بتحسين جودة وموثوقية التقييمات الصحية من خلال منهجيات متقدمة.
نتائج
في نتائج التقويم للدراسة، تم تسجيل ما مجموعه 1,513 فاحصًا، حيث أكمل 728 (48.12%) عملية التقويم لجميع المؤشرات. أما الفاحصون المتبقيون فإما لم يكن لديهم سجلات شاملة أو لم يحققوا مستوى كبيرًا من الاتفاق. كانت قيم كابا الدنيا المسجلة 0.61 تقريبًا لجميع الحالات، باستثناء العضّة المتقاطعة الخلفية، التي كانت لها قيمة كابا دنيا قدرها 0.638. كانت القيمة القصوى لكابا التي تم الوصول إليها 1 لمعظم الحالات، باستثناء تاج الأسنان اللبنية (مؤشر dmft).
أظهرت التحليلات أن نسبًا أعلى من الفاحصين أظهرت اتفاقًا شبه مثالي في تقييم حالة التاج في الأسنان الدائمة، وعواقب تسوس الأسنان السريرية غير المعالجة، وإصابات الأسنان. ومن الجدير بالذكر أن أعلى نسبة من الفاحصين الذين كانت قيم كابا لديهم تتراوح بين 0.61 إلى 0.80 كانت مرتبطة بمؤشر الجمال السني (DAI). بالإضافة إلى ذلك، لوحظ أن حالات الإطباق في كل من الأسنان اللبنية والدائمة غالبًا ما كانت تتطلب من 2 إلى 4 محاولات لتحقيق قيمة كابا لا تقل عن 0.61.
مناقشة
تتناول قسم المناقشة في ورقة البحث المنهجيات المستخدمة لتدريب وتقويم الفاحصين المشاركين في مسح SB Brasil 2023 للصحة الفموية. قام أطباء الأسنان من النظام الصحي الموحد (SUS) بإجراء فحوصات فموية على عينة احتمالية من المشاركين عبر مختلف الفئات العمرية، مع الالتزام بإرشادات منظمة الصحة العالمية ومعايير SB Brasil 2010. تم تسهيل التدريب من خلال بيئة تعليمية افتراضية (Moodle®)، تتضمن مكونات نظرية وعملية، بما في ذلك طريقة التقويم in-lux، التي استخدمت مجموعة متنوعة من الصور لمحاكاة سيناريوهات الفحص الواقعية. سمحت هذه الطريقة بتدريب وتقويم فعال عن بُعد لعدد كبير من الفاحصين، مما يضمن التناسق في تطبيق معايير التقييم.
أشارت النتائج إلى مستوى عالٍ من الاتفاق بين الفاحصين، مما يدل على جدوى عملية التقويم. قللت الطريقة التوافقية لتعريف فحص قياسي من التباينات وأقامت معيارًا لتقييم أداء الفاحصين. أكدت الدراسة على أهمية اختيار فاحص قياسي لقياس موثوقية الفاحصين بشكل دقيق وضرورة استخدام عينة تمثيلية من الصور لتعكس الحالات التي تمت مواجهتها في العمل الميداني. بشكل عام، تمثل المنهجيات التي تم تطويرها في هذه الدراسة تقدمًا كبيرًا في تدريب وتقويم الفاحصين للمسوحات الوبائية واسعة النطاق، مما يعزز موثوقية التقييمات الصحية الفموية عبر مجموعات سكانية متنوعة.
DOI: https://doi.org/10.1590/1807-3107bor-2025.vol39.045
PMID: https://pubmed.ncbi.nlm.nih.gov/40396849
Publication Date: 2025-01-01
Author(s): Raquel Conceição Ferreira et al.
Primary Topic: Dental Research and COVID-19
Overview
This methodological study details the creation and application of technological tools for the online training and calibration of dentists involved in the SB Brasil 2023 survey, utilizing the Moodle® platform. The calibration process incorporated 10 and 25 sets of photographs to assess various dental conditions, including dental crown status (measured by dmft and DMFT indices), caries consequences (pufa/PUFA index), malocclusion (evaluated through canine relation, overjet, overbite, posterior crossbite, and the Dental Aesthetic Index), and dental trauma, adhering to WHO or SB Brasil 2010 criteria. A custom software was developed to facilitate the recording of codes, automate the calculation of agreement coefficients (including overall percentage, score-specific, and both simple and weighted kappa), and generate detailed reports.
The study involved 1,513 examiners, of whom 728 achieved substantial or higher agreement (Kappa ≥ 0.61) across all assessed conditions. Individual reports highlighted discrepancies and tracked calibration attempts, revealing that occlusal conditions exhibited the lowest rates of almost perfect agreement, necessitating more attempts for successful calibration. The findings underscore the effectiveness of the implemented technological tools in enabling online training and calibration, thereby enhancing consistency among examiners in fieldwork. This approach demonstrates the viability of remote calibration strategies in epidemiological surveys, particularly beneficial for managing multiple examiners across diverse geographic locations, with implications for broader applications in various health contexts.
Introduction
The introduction of the research paper discusses the significance of population-based oral health surveys in estimating the prevalence of major oral health conditions, which are crucial for informing public policy and dental service planning. These surveys face challenges, particularly regarding the involvement of multiple examiners, necessitating standardized diagnostic criteria to ensure the reliability and validity of findings. The World Health Organization (WHO) has advocated for training and calibration protocols since the 1990s to standardize diagnostic interpretations among examiners, thereby minimizing variability and ensuring consistent adherence to standards.
Traditional calibration methods, primarily in vivo clinical examinations, present logistical and ethical challenges, particularly in resource-limited settings or with specific populations such as young children and individuals with disabilities. To address these issues, the in-lux method, which utilizes high-quality photographic records of dental conditions, has been proposed and successfully implemented in various surveys, including the Brazilian Oral Health Survey (SB Brasil 2010). This method not only enhances feasibility but also allows for efficient calibration of multiple examiners, reduces logistical costs, and mitigates ethical concerns. The introduction of digital technologies during the COVID-19 pandemic further prompted the adaptation of training and calibration processes to online formats, culminating in the development of calibration software and a data management system for the SB Brasil 2023 survey, which is detailed in the article.
Methods
This methodological study focuses on the development and implementation of technological tools aimed at training and calibrating examiners for the SB Brasil 2023 initiative, coordinated by the Brazilian Ministry of Health. The data collection phase is scheduled for 2023 and 2024, ensuring a comprehensive evaluation of the tools’ effectiveness in real-world settings.
The technological tool’s development and testing were conducted over a period from June 2020 to August 2021, highlighting a structured approach to innovation in examiner training. This timeline underscores the commitment to enhancing the quality and reliability of health assessments through advanced methodologies.
Results
In the calibration results of the study, a total of 1,513 examiners were registered, with 728 (48.12%) completing the calibration process for all indices. The remaining examiners either lacked comprehensive records or did not achieve a substantial level of agreement. The minimum Kappa values recorded were 0.61 for nearly all conditions, with the exception of the Posterior Crossbite, which had a minimum Kappa of 0.638. The maximum Kappa value reached was 1 for most conditions, except for the crown of deciduous teeth (dmft index).
The analysis revealed that higher percentages of examiners demonstrated almost-perfect agreement in assessing the crown condition in permanent dentition, untreated dental caries clinical consequences, and dental trauma. Notably, the highest percentage of examiners with Kappa values ranging from 0.61 to 0.80 was associated with the Dental Aesthetic Index (DAI). Additionally, it was observed that occlusion conditions in both deciduous and permanent dentition frequently required 2 to 4 attempts to achieve a Kappa value of at least 0.61.
Discussion
The discussion section of the research paper outlines the methodologies employed for training and calibrating examiners involved in the SB Brasil 2023 oral health survey. Dentists from the Unified Health System (SUS) conducted oral examinations on a probabilistic sample of participants across various age groups, adhering to WHO guidelines and the SB Brasil 2010 criteria. The training was facilitated through a virtual learning environment (Moodle®), incorporating both theoretical and practical components, including the in-lux calibration method, which utilized a diverse set of photographs to simulate real-life examination scenarios. This method allowed for effective remote training and calibration of a large number of examiners, ensuring consistency in the application of assessment criteria.
The results indicated a high level of agreement among examiners, demonstrating the feasibility of the calibration process. The consensus approach for defining a standard examination minimized discrepancies and established a benchmark for evaluating examiner performance. The study emphasized the importance of selecting a standard examiner to accurately measure inter-examiner reliability and the necessity of using a representative sample of photographs to reflect the conditions encountered in fieldwork. Overall, the methodologies developed in this study represent significant advancements in the training and calibration of examiners for large-scale epidemiological surveys, enhancing the reliability of oral health assessments across diverse populations.