DOI: https://doi.org/10.1017/sjp.2026.10022
PMID: https://pubmed.ncbi.nlm.nih.gov/42051214
تاريخ النشر: 2026-01-01
المؤلف: Susana Sanz وآخرون
الموضوع الرئيسي: المنهجيات النفسية والاختبار
نظرة عامة
تستكشف هذه الدراسة تأثير تضمين خيار “لا شيء مما سبق” (NOTA) في التقييمات، مع التركيز بشكل خاص على خصائصه النفسية وتأثير سمات الشخصية على نتائجه. شملت الأبحاث 449 طالبًا في علم النفس أكملوا اختبار مفهوم الإحصاء، حيث تم التلاعب بخيار NOTA من حيث تقديمه ودوره كإجابة صحيحة أو كخيار مشتت. تم استخدام نموذج تأثيرات عشوائية متقاطعة لتحليل احتمال الإجابات الصحيحة بناءً على خصائص العناصر والمتغيرات المرتبطة بالطلاب.
تشير النتائج إلى أن وجود NOTA يقلل بشكل كبير من احتمال الإجابات الصحيحة، مما يشير إلى أن تضمينه يزيد من صعوبة العناصر. بالإضافة إلى ذلك، ظهرت سمات الشخصية مثل الضمير الحي، والانفتاح، والاستقرار العاطفي، إلى جانب المعرفة السابقة بالإحصاء، كمتنبئات مهمة للأداء. من الجدير بالذكر أن الدراسة تكشف عن تباين في كيفية استجابة مختلف الممتحنين لخيارات NOTA، مما يبرز التأثيرات الدقيقة للشخصية على نتائج التقييم.
مقدمة
تسلط المقدمة الضوء على التحديات المتعلقة بقياس معرفة الطلاب بشكل فعال من خلال التقييمات، خاصة في سياق العناصر متعددة الخيارات (MC). تُفضل هذه التقييمات لقدرتها على تقييم عدد كبير من الطلاب بسرعة وموضوعية، لكنها تتطلب بناءً دقيقًا لضمان تنوع العناصر في الصعوبة وامتلاكها خصائص نفسية قوية. الكتابة الواضحة للأصول وخيارات الاستجابة أمر حاسم لتقليل الأخطاء وضمان أن تعكس التقييمات بدقة مستويات معرفة الممتحنين.
علاوة على ذلك، تناقش المقدمة تأثير سمات الشخصية على الأداء الأكاديمي، مشيرة إلى أن هذه السمات يمكن أن تتفاعل مع عيوب كتابة العناصر، مما قد يؤدي إلى تقييمات غير عادلة. تشير إلى العمل الأساسي لـ Haladyna وDowning، الذين جمعوا 31 توصية لكتابة العناصر، مؤكدين على أهمية صياغة خيارات مشتتة معقولة. يتم الاعتراف بتعقيد إنشاء مشتتات فعالة كأحد التحديات الكبيرة للمعلمين، مما يؤدي غالبًا إلى استخدام بدائل أبسط مثل “لا شيء مما سبق” (NOTA)، والتي يتم تثبيط استخدامها عمومًا. تختتم هذه الفقرة بالتأكيد على الحاجة إلى استراتيجيات تبسط عملية كتابة العناصر مع الحفاظ على جودة التقييم.
النتائج
يقدم قسم “النتائج” في ورقة البحث النتائج الرئيسية المستمدة من التجارب أو التحليلات التي تم إجراؤها. يسلط الضوء على نقاط البيانات المهمة، والاتجاهات، والارتباطات التي لوحظت خلال الدراسة. عادةً ما تكون النتائج مصحوبة بتحليلات إحصائية ذات صلة، بما في ذلك قيم p وفترات الثقة، للتحقق من النتائج.
بالإضافة إلى ذلك، قد تتضمن التمثيلات الرسومية مثل الرسوم البيانية أو الجداول لتوضيح البيانات بشكل أكثر وضوحًا، مما يسمح بتفسير أسهل للعلاقات المعقدة. تختتم هذه الفقرة بمناقشة تداعيات هذه النتائج في سياق الأسئلة البحثية المطروحة، مع التأكيد على أهميتها في المجال الأوسع للدراسة.
المناقشة
تسلط فقرة المناقشة في ورقة البحث الضوء على التعقيدات والجدل المحيط باستخدام خيارات “لا شيء مما سبق” (NOTA) في التقييمات متعددة الخيارات. حدد Haladyna وDowning (1989b) في البداية أن العناصر التي تحتوي على NOTA تميل إلى أن تكون أكثر صعوبة وأقل موثوقية، مما يؤثر سلبًا على صلاحية المعايير. وقد تم تكرار توصياتهم ضد استخدام NOTA في الأدبيات اللاحقة، على الرغم من أن بعض الباحثين يجادلون بأن زيادة الصعوبة قد تكون مفيدة في منع الاختبارات السهلة للغاية. يشير الإجماع إلى أن وجود NOTA كإجابة صحيحة يزيد بشكل كبير من صعوبة العناصر مقارنةً عندما تعمل فقط كمشتت. علاوة على ذلك، يقدم NOTA عدم اليقين للممتحنين، مما يمكن أن يقلل من القيمة التعليمية للتقييم من خلال السماح بالإجابات الصحيحة دون فهم قوي للمادة.
تستعرض الفقرة أيضًا العلاقة بين سمات الشخصية والأداء الأكاديمي، مشيرة إلى النتائج المختلطة. يرتبط الضمير الحي بشكل إيجابي مع النجاح الأكاديمي باستمرار، بينما تظهر سمات مثل الانفتاح والعصابية غالبًا ارتباطات سلبية. تهدف الدراسة إلى استكشاف كيفية تأثير NOTA على أداء الاختبار وما إذا كانت سمات الشخصية تؤثر على الاستجابات لعناصر NOTA. يتضمن تصميم البحث ثلاثة أشكال من عناصر الإحصاء، مع تغيير دور NOTA، ويستخدم نماذج إحصائية متقدمة لتحليل البيانات. تركز الفرضيات على تأثير NOTA على احتمالات الإجابات الصحيحة وتفاعل سمات الشخصية مع سلوك الممتحنين استجابةً لخيارات NOTA. من المتوقع أن توفر النتائج رؤى حول فعالية NOTA في التقييمات وتداعياتها على الممارسات التعليمية.
DOI: https://doi.org/10.1017/sjp.2026.10022
PMID: https://pubmed.ncbi.nlm.nih.gov/42051214
Publication Date: 2026-01-01
Author(s): Susana Sanz et al.
Primary Topic: Psychometric Methodologies and Testing
Overview
This study investigates the impact of including a “None-of-the-above” (NOTA) option in assessments, particularly focusing on its psychometric properties and the influence of personality traits on its effects. The research involved 449 psychology students who completed a statistics concept inventory, with the NOTA option manipulated in terms of its presentation and role as either the correct answer or a distractor. A crossed random-effects model was employed to analyze the probability of correct responses based on item characteristics and student covariates.
The findings indicate that the presence of NOTA significantly decreases the likelihood of correct answers, suggesting that its inclusion increases item difficulty. Additionally, personality traits such as Conscientiousness, Extraversion, and Emotional Stability, along with prior knowledge of statistics, emerged as significant predictors of performance. Notably, the study reveals variability in how different examinees respond to NOTA options, highlighting the nuanced effects of personality on assessment outcomes.
Introduction
The introduction highlights the challenges of effectively measuring student knowledge through assessments, particularly in the context of multiple-choice items (MC). These assessments are favored for their ability to evaluate a large number of students quickly and objectively, but they require careful construction to ensure that items vary in difficulty and possess strong psychometric properties. Clear writing of stems and response options is crucial to minimize errors and ensure that assessments accurately reflect examinees’ knowledge levels.
Furthermore, the introduction discusses the influence of personality traits on academic performance, noting that these traits can interact with item-writing flaws, potentially leading to unfair assessments. It references the foundational work of Haladyna and Downing, who compiled 31 recommendations for item writing, emphasizing the importance of crafting plausible distractors. The complexity of creating effective distractors is acknowledged as a significant challenge for educators, often leading to the use of simpler alternatives like “None-of-the-above” (NOTA), which is generally discouraged. The section concludes by underscoring the need for strategies that streamline the item-writing process while maintaining assessment quality.
Results
The “Results” section of the research paper presents key findings derived from the conducted experiments or analyses. It highlights significant data points, trends, and correlations observed during the study. The results are typically accompanied by relevant statistical analyses, including p-values and confidence intervals, to validate the findings.
Additionally, graphical representations such as charts or tables may be included to illustrate the data more clearly, allowing for easier interpretation of complex relationships. The section concludes with a discussion of the implications of these results in the context of the research questions posed, emphasizing their relevance to the broader field of study.
Discussion
The discussion section of the research paper highlights the complexities and controversies surrounding the use of “None of the Above” (NOTA) options in multiple-choice assessments. Haladyna and Downing (1989b) initially identified that items with NOTA tend to be more difficult and less reliable, negatively impacting criterion validity. Their recommendations against the use of NOTA have been echoed in subsequent literature, although some researchers argue that the increased difficulty may be beneficial in preventing overly easy tests. The consensus suggests that the presence of NOTA as the correct answer significantly heightens item difficulty compared to when it serves merely as a distractor. Furthermore, NOTA introduces uncertainty for examinees, which can detract from the assessment’s educational value by allowing correct answers without a solid understanding of the material.
The section also examines the relationship between personality traits and academic performance, noting mixed findings. Conscientiousness consistently correlates positively with academic success, while traits like Extraversion and Neuroticism often show negative associations. The study aims to explore how NOTA affects test performance and whether personality traits influence responses to NOTA items. The research design includes three forms of statistics items, varying the role of NOTA, and employs advanced statistical models to analyze the data. The hypotheses focus on the impact of NOTA on correct answer probabilities and the interaction of personality traits with examinee behavior in response to NOTA options. The findings are expected to provide insights into the effectiveness of NOTA in assessments and its implications for educational practices.