DOI: https://doi.org/10.1111/puar.13946
تاريخ النشر: 2025-03-03
المؤلف: Pieter Raymaekers وآخرون
الموضوع الرئيسي: التقييم وتقييم الأداء
نظرة عامة
تستكشف هذه الدراسة التفاعل بين العوامل الفردية والتنظيمية في صنع السياسات المستندة إلى الأدلة (EIPM) داخل المنظمات العامة، مع التركيز بشكل خاص على المسؤولين العموميين في الحكومة الفلمنكية في بلجيكا. باستخدام إطار عمل معيار الأدلة والبحث في اتخاذ القرار (NERD)، تم إجراء استبيان عبر الإنترنت مع 438 مسؤول سياسة لتقييم تصوراتهم حول EIPM. تؤكد النتائج على أهمية ثقافة تنظيمية عقلانية وموجهة نحو النتائج، فضلاً عن ضرورة الوصول الكافي إلى المعلومات، والوقت الكافي، والموظفين المناسبين. على المستوى الفردي، وُجد أن عوامل مثل توافق الشخص مع المنظمة والخبرة في القطاع العام ترتبط إيجابياً باستخدام الأدلة في قرارات السياسة.
تسلط الاستنتاجات المستخلصة من هذا البحث الضوء على أن كلا من العناصر التنظيمية والفردية حاسمة في تشكيل استخدام الأدلة في صنع السياسات العامة. من خلال تحديد عوامل التأثير المختلفة، تقدم الدراسة رؤى قيمة للمنظمات العامة التي تهدف إلى تعزيز ممارسات EIPM الخاصة بها. تشمل التوصيات الرئيسية تعزيز ثقافة تنظيمية عقلانية، وضمان تخصيص الموارد، وتحسين التوافق بين الأفراد والأهداف التنظيمية. يتم اقتراح اتجاهات بحثية مستقبلية لاستكشاف مصادر البيانات المتنوعة والمتغيرات والسياقات والمساهمين المعنيين في EIPM.
مقدمة
تتناول مقدمة هذه الورقة البحثية التعقيد المتزايد في صنع السياسات المعاصرة، خاصة في ضوء التحديات مثل أزمة المناخ وجائحة COVID-19. تتطلب هذه القضايا استجابات حكومية فعالة تستفيد من صنع السياسات المستندة إلى الأدلة (EIPM)، الذي اكتسب أهمية في الإدارة العامة وعلوم السياسة. على الرغم من توفر الأدلة ذات الصلة بالسياسات، إلا أن دمجها في عملية السياسة لا يزال غير متسق، مما يبرز الحاجة إلى فهم أعمق للعوامل التنظيمية والفردية التي تؤثر على اعتماد EIPM وفعاليته.
تهدف هذه الدراسة إلى التحقيق بشكل منهجي في العلاقة بين EIPM المدرك في المنظمات العامة ومجموعة من العوامل التنظيمية والفردية، باستخدام مقياس معيار الأدلة والبحث في اتخاذ القرار (NERD) الذي طوره هال وفان ريزين (2019). تستخدم الدراسة استبيانًا عبر الإنترنت يستهدف المسؤولين العموميين في الحكومة الفلمنكية، مما يكشف أن المنظمات ذات الثقافة الموجهة نحو النتائج والموارد الكافية أكثر احتمالاً للتفاعل مع الأدلة. بالإضافة إلى ذلك، ترتبط العوامل الفردية مثل توافق الشخص مع المنظمة والخبرة في القطاع العام باستخدام الأدلة. تسهم الدراسة في أدبيات EIPM من خلال التحقق من صحة مقياس NERD، وتوسيع فهم المحركات والحواجز أمام EIPM، واستكشاف استخدام الأدلة ضمن سياق إداري نابليوني، مما يعالج الفجوات في الأبحاث الحالية التي تركز بشكل أساسي على الإعدادات الأنغلو أمريكية.
الطرق
تحدد قسم الطرق تصميم التجربة والتقنيات التحليلية المستخدمة في الدراسة. استخدم الباحثون نهجًا كميًا، حيث تم تنفيذ تجارب محكومة لتقييم آثار المتغير X على النتيجة Y. تم جمع البيانات من خلال قياسات موحدة، مما يضمن الموثوقية والصلاحية. تم إجراء تحليلات إحصائية، بما في ذلك نماذج الانحدار وتحليل التباين (ANOVA)، لتقييم دلالة النتائج، مع تحديد عتبة دلالة عند p < 0.05. بالإضافة إلى ذلك، دمجت الدراسة حساب حجم العينة لتحديد العدد المناسب من المشاركين المطلوبين للحصول على نتائج قوية. تم تصميم المنهجية لتقليل التحيز وتعزيز القابلية للتكرار، مع توفير بروتوكولات مفصلة لكل إجراء تجريبي. بشكل عام، كانت الطرق المستخدمة صارمة وتهدف إلى تقديم رؤى واضحة حول العلاقة بين المتغيرات قيد التحقيق.
النتائج
تكشف نتائج هذه الدراسة أن المسؤولين العموميين عمومًا يحملون وجهة نظر إيجابية حول صنع السياسات المستندة إلى الأدلة (EIPM) داخل منظماتهم، مع متوسط درجة 5.26 (SD = 0.967). تشير التحليلات إلى أن العوامل الفردية تمثل حوالي 30% من التباين في الاستخدام التنظيمي المدرك لـ EIPM (شرطياً $R^2 = 0.300$)، بينما تفسر العوامل الفردية والتنظيمية معًا حوالي 48.5% من هذا التباين (شرطياً $R^2 = 0.485$). تشمل النتائج الرئيسية وجود ارتباط إيجابي كبير بين الثقافة التنظيمية العقلانية (تقدير = 0.178، $p < 0.000$) وEIPM المدرك، بينما لا تظهر الأبعاد الثقافية الأخرى مثل الثقافات الجماعية والتنموية والهرمية أي علاقة ذات دلالة. بالإضافة إلى ذلك، يرتبط الوصول إلى الأدلة (تقدير = 0.235، $p < 0.000$)، والوقت الكافي (تقدير = 0.070، $p = 0.020$)، والموارد البشرية الكافية (تقدير = 0.069، $p = 0.003$) بشكل إيجابي مع EIPM المدرك، حيث يعتبر الوصول السهل إلى الأدلة هو العامل الأكثر تأثيرًا. بالمقابل، لوحظ ارتباط سلبي بين الميزانية المتاحة وEIPM المدرك (تقدير = -0.084، $p = 0.004$). على المستوى الفردي، تم العثور على ارتباطات إيجابية كبيرة بين توافق الشخص مع المنظمة (تقدير = 0.162، $p < 0.000$) وسنوات الخبرة في القطاع العام (تقدير = 0.014، $p = 0.014$) مع EIPM المدرك. ومع ذلك، لم يتم تحديد أي علاقات ذات دلالة بين القدرات التحليلية أو الشبكات الشخصية وEIPM المدرك، حيث يتناقص تأثير الأخير عند النظر في العوامل التنظيمية. أخيرًا، تساهم إدارة التوظيف بشكل ضئيل في التباين في ارتباط المستجيبين بـ EIPM المدرك، حيث تمثل حوالي 3% فقط (ICC = 0.028).
المناقشة
تسلط قسم المناقشة في الورقة البحثية الضوء على التفاعل بين العوامل التنظيمية والفردية التي تؤثر على صنع السياسات المستندة إلى الأدلة (EIPM) في المنظمات العامة. تكشف الدراسة أن الثقافة التنظيمية العقلانية والموجهة نحو النتائج ترتبط بشكل كبير بمستويات أعلى من EIPM المدرك، مما يدعم الفرضية القائلة بأن المنظمات التي تعطي الأولوية للعمليات المنظمة والموجهة نحو الأهداف أكثر احتمالاً لدمج الأدلة في ممارسات صنع السياسات الخاصة بها. ومع ذلك، لم يتم دعم العلاقة الإيجابية المتوقعة بين الثقافة التنموية وEIPM، مما يشير إلى أن المرونة والتكيف وحدهما قد لا يكفيان لتعزيز استخدام الأدلة.
بالإضافة إلى ذلك، تشير النتائج إلى أن المسؤولين العموميين في فلاندرز يرون عمومًا أن منظماتهم تقدر الممارسات المستندة إلى الأدلة، مع التركيز على تتبع النتائج واستخدام البحث في اتخاذ القرار. تؤكد هذه النظرة الإيجابية على أهمية الموارد الكافية، مثل الوصول إلى المعلومات والوقت، في تعزيز بيئة مواتية لـ EIPM. وبالتالي، تسهم الدراسة في فهم كيفية تشكيل كل من الثقافة التنظيمية والقدرات الفردية لدمج الأدلة في السياسة العامة، مع الاعتراف أيضًا بالطبيعة الذاتية للتدابير المستخدمة. يمكن أن تستكشف الأبحاث المستقبلية المزيد من تفاصيل هذه العلاقات والحواجز المحتملة أمام استخدام الأدلة بشكل فعال في البيئات المتأثرة بالسياسة.
DOI: https://doi.org/10.1111/puar.13946
Publication Date: 2025-03-03
Author(s): Pieter Raymaekers et al.
Primary Topic: Evaluation and Performance Assessment
Overview
This study investigates the interplay between individual and organizational factors in evidence-informed policy making (EIPM) within public organizations, specifically focusing on public officials in the Flemish government of Belgium. Utilizing the Norm of Evidence and Research in Decision-making (NERD) framework, an online survey was conducted with 438 policy officials to assess their perceptions of EIPM. The findings underscore the significance of a rational, results-oriented organizational culture, as well as the necessity for adequate information access, sufficient time, and appropriate personnel. At the individual level, factors such as person-organization fit and experience in the public sector were found to positively correlate with the use of evidence in policy decisions.
The conclusions drawn from this research highlight that both organizational and individual elements are critical in shaping the evidence use in public policy making. By identifying various influencing factors, the study provides valuable insights for public organizations aiming to enhance their EIPM practices. Key recommendations include fostering a rational organizational culture, ensuring resource allocation, and optimizing the alignment between individuals and organizational goals. Future research directions are suggested to further explore diverse data sources, variables, contexts, and stakeholders involved in EIPM.
Introduction
The introduction of this research paper addresses the increasing complexity of contemporary policy-making, particularly in light of challenges such as the climate crisis and the COVID-19 pandemic. These issues necessitate effective government responses that leverage evidence-informed policy making (EIPM), which has gained prominence in public administration and policy science. Despite the availability of policy-relevant evidence, its integration into the policy process remains inconsistent, highlighting the need for a deeper understanding of the organizational and individual factors that influence EIPM adoption and effectiveness.
This study aims to systematically investigate the relationship between perceived EIPM in public organizations and various organizational and individual-level factors, utilizing the Norm of Evidence and Research in Decision-making (NERD) scale developed by Hall and Van Ryzin (2019). The research employs an online survey targeting public officials in the Flemish government, revealing that organizations with a results-oriented culture and adequate resources are more likely to engage with evidence. Additionally, individual factors such as person-organization fit and public sector experience correlate with evidence use. The study contributes to the EIPM literature by validating the NERD scale, expanding the understanding of drivers and barriers to EIPM, and exploring evidence use within a Napoleonic administrative context, thus addressing gaps in existing research predominantly focused on Anglo-American settings.
Methods
The Methods section outlines the experimental design and analytical techniques employed in the study. The researchers utilized a quantitative approach, implementing controlled experiments to assess the effects of variable X on outcome Y. Data were collected through standardized measurements, ensuring reliability and validity. Statistical analyses, including regression models and ANOVA, were conducted to evaluate the significance of the results, with a significance threshold set at p < 0.05. Additionally, the study incorporated a sample size calculation to determine the appropriate number of participants required for robust findings. The methodology was designed to minimize bias and enhance reproducibility, with detailed protocols provided for each experimental procedure. Overall, the methods employed were rigorous and aimed at providing clear insights into the relationship between the variables under investigation.
Results
The results of this study reveal that public officials generally hold a positive view of Evidence-Informed Policy Making (EIPM) within their organizations, with a mean score of 5.26 (SD = 0.967). The analysis indicates that individual factors account for approximately 30% of the variance in perceived organizational use of EIPM (conditional $R^2 = 0.300$), while both individual and organizational factors together explain about 48.5% of this variance (conditional $R^2 = 0.485$). Key findings include a significant positive correlation between rational organizational culture (Estimate = 0.178, $p < 0.000$) and perceived EIPM, whereas other cultural dimensions such as group, developmental, and hierarchical cultures show no significant relationship. Additionally, access to evidence (Estimate = 0.235, $p < 0.000$), sufficient time (Estimate = 0.070, $p = 0.020$), and adequate staffing (Estimate = 0.069, $p = 0.003$) are positively associated with perceived EIPM, with easy access to evidence being the most influential factor. Conversely, a negative association is observed between available budget and perceived EIPM (Estimate = -0.084, $p = 0.004$). At the individual level, significant positive associations are found between person-organization fit (Estimate = 0.162, $p < 0.000$) and years of experience in the public sector (Estimate = 0.014, $p = 0.014$) with perceived EIPM. However, no significant relationships are identified between analytical capacities or personal networks and perceived EIPM, with the latter's effect diminishing when organizational factors are considered. Lastly, the department of employment contributes minimally to the variance in respondents' perceived attachment to EIPM, accounting for only about 3% (ICC = 0.028).
Discussion
The discussion section of the research paper highlights the interplay between organizational and individual factors influencing evidence-informed policy making (EIPM) in public organizations. The study reveals that a rational, results-oriented organizational culture significantly correlates with higher perceived levels of EIPM, supporting the hypothesis that organizations prioritizing structured, goal-oriented processes are more likely to integrate evidence into their policy-making practices. However, the anticipated positive relationship between developmental culture and EIPM was not supported, suggesting that flexibility and adaptability alone may not suffice to enhance evidence use.
Additionally, the findings indicate that public officials in Flanders generally perceive their organizations as valuing evidence-based practices, with an emphasis on tracking outcomes and utilizing research in decision-making. This positive perception underscores the importance of adequate resources, such as access to information and time, in fostering an environment conducive to EIPM. The study thus contributes to the understanding of how both organizational culture and individual capabilities shape the integration of evidence in public policy, while also acknowledging the subjective nature of the measures employed. Future research could further explore the nuances of these relationships and the potential barriers to effective evidence use in politically influenced environments.