الجودة النفسية الإحصائية لاختبار الرياضيات في المدارس الابتدائية: تحليل نظرية الاختبار الكلاسيكية لصعوبة العناصر، والتمييز، ووظيفة المشتتات Psychometric Quality Of An Elementary School Mathematics Test: A Classical Test Theory Analysis Of Item Difficulty, Discrimination, And Distractor Functioning

شارك:
المجلة: Jurnal Penelitian، المجلد: 11، العدد: 2
DOI: https://doi.org/10.46491/jp.v11i2.2550
تاريخ النشر: 2026-08-20
المؤلف: M. Lis Haryanto وآخرون
الموضوع الرئيسي: المنهجيات النفسية والاختبار

نظرة عامة

تقييمت هذه الدراسة الخصائص النفسية لاختبار رياضيات متعدد الخيارات مكون من 25 سؤالًا يركز على المحيط والمساحة، تم إجراؤه على 35 طالبًا في الصف الخامس. باستخدام إطار نظرية الاختبار الكلاسيكية، كشفت التحليلات أن 23 سؤالًا تم تصنيفها على أنها سهلة (صعوبة السؤال $P$ تتراوح من 0.71 إلى 0.91)، مع وجود سؤالين فقط يصنفان على أنهما صعبين بشكل معتدل ($P = 0.69$). كانت مؤشرات التمييز ($D$) متغيرة بشكل كبير، من -0.10 إلى 0.60، مما يشير إلى أنه بينما أظهر ستة أسئلة تمييزًا جيدًا، كان لدى ثلاثة أسئلة تمييز صفري وسؤالين قيم سلبية. بالإضافة إلى ذلك، سلط تحليل المشتتات الضوء على عدم التوازن في الأداء، خاصة بالنسبة للأسئلة ذات أنماط الاستجابة المركزة.

تشير النتائج إلى أنه بينما يكون الاختبار فعالًا في تقييم الإتقان الأساسي، فإنه يفتقر إلى التوازن اللازم لتمييز الطلاب عبر نطاق أوسع من القدرات. تقترح الدراسة إطارًا لمراجعة الأسئلة، موصية بالاحتفاظ بالأسئلة القوية، والتحقق من تلك ذات التمييز السلبي، ومراجعة الأسئلة ذات التمييز الصفري، وإعادة بناء المشتتات الضعيفة بناءً على المفاهيم الخاطئة الشائعة. تشمل القيود حجم العينة الصغيرة وعدم القدرة على تقدير موثوقية الاتساق الداخلي بسبب بيانات الاستجابة غير المكتملة. يتم تشجيع الأبحاث المستقبلية على تضمين عينات أكبر من مدارس متعددة وتطبيق منهجيات متقدمة مثل نظرية استجابة العناصر (IRT) لتعزيز قوة الاختبار النفسية وفائدته التعليمية.

مقدمة

تؤكد مقدمة ورقة البحث على الدور الحاسم للتقييمات الصفية عالية الجودة في عكس المعرفة الأساسية للطلاب في الرياضيات الابتدائية بدقة. تبرز أن مجرد توافق عناصر الاختبار مع المحتوى غير كافٍ؛ فهناك حاجة إلى تحليل تجريبي لأداء العناصر بعد الإدارة. باستخدام نظرية الاختبار الكلاسيكية (CTT)، تفحص الدراسة مؤشرات رئيسية مثل صعوبة السؤال (P)، التمييز (D)، وأداء المشتتات لتقييم فعالية العناصر. تشير قيمة P الأعلى إلى أسئلة أسهل، بينما يقيس D قدرة العناصر على التمييز بين الطلاب ذوي الأداء العالي والمنخفض. تشير الورقة إلى أن الاعتماد على عناصر سهلة جدًا يمكن أن يحجب الفروق المهمة بين الطلاب، خاصة أولئك في الطرف الأعلى من نطاق القدرات، وأن المشتتات ذات الأداء الضعيف يمكن أن تضر بتمييز العناصر.

تهدف الدراسة إلى سد الفجوة في الأدلة التجريبية بشأن أداء العناصر في التقييمات الصفية الابتدائية، والتي تختلف عن الامتحانات المهنية بسبب مجموعات أصغر وأقل تنظيمًا من بنوك العناصر. من خلال دمج الصعوبة، والتمييز، وأنماط استجابة الخيارات في إطار عمل موجه نحو القرار، تسعى الأبحاث إلى تقديم رؤى قابلة للتنفيذ للمعلمين حول العناصر التي يجب الاحتفاظ بها أو مراجعتها أو مراجعتها. يركز التحليل على اختبار رياضيات مكون من 25 عنصرًا للصف الخامس يتعلق بالمحيط والمساحة، مسترشدًا بثلاثة أسئلة مركزية بشأن توزيع العناصر، وفعالية التمييز، وتحليل المشتتات. تهدف النتائج إلى تقديم توصيات عملية مع الاعتراف بالقيود الكامنة في الاستنتاجات المستخلصة من أحجام العينات الصغيرة.

الطرق

تحدد قسم “الطرق” في ورقة البحث التصميم التجريبي والتقنيات التحليلية المستخدمة للتحقيق في أسئلة البحث. استخدمت الدراسة نهجًا كميًا، متضمنة تحليلات إحصائية لتقييم البيانات التي تم جمعها من تجارب مختلفة. شملت المنهجيات المحددة تجارب محكومة، حيث تم التلاعب بالمتغيرات بشكل منهجي لمراقبة آثارها على النتائج المعنية.

شملت جمع البيانات مقاييس نوعية وكمية، مما يضمن فهمًا شاملاً للظواهر قيد الدراسة. تم إجراء التحليل باستخدام برامج إحصائية قياسية، وتطبيق تقنيات مثل تحليل الانحدار واختبار الفرضيات لاستخلاص استنتاجات ذات مغزى من البيانات. تم تصميم الطرق بدقة لتقليل التحيز وتعزيز موثوقية النتائج، مما يساهم في صحة النتائج البحثية بشكل عام.

النتائج

ركز تحليل نتائج التقييم، الذي شمل 35 سجل استجابة عبر 25 عنصرًا، بشكل أساسي على أدلة مستوى العنصر بسبب غياب مصفوفة كاملة للأشخاص حسب العناصر. تراوحت قيم P الملاحظة من 0.69 إلى 0.91، مما يشير إلى أن الغالبية العظمى من المشاركين أجابوا بشكل صحيح على معظم العناصر. تشير هذه السهولة العالية إما إلى إتقان قوي من الطلاب أو نقص في العناصر التحدي، مع توزيع صعوبة العناصر منحرفًا بشدة نحو الأسئلة السهلة. على وجه التحديد، تم تصنيف العناصر 1 و 11 فقط على أنها معتدلة (P = 0.69)، بينما تم تصنيف 23 عنصرًا على أنها سهلة (P = 0.71-0.91)، مع عرض العنصر 5 أعلى قيمة سهولة (P = 0.91). وبالتالي، كانت 92% من التقييم تتكون من عناصر سهلة، مما يحد من فعاليتها في تمييز مستويات الإتقان الأعلى بين الطلاب.

تفاوت تمييز العناصر بشكل كبير، مع قيم تتراوح من -0.10 إلى 0.60. أظهرت ستة عناصر تمييزًا جيدًا أو جيد جدًا، مما يشير إلى أنها تم الإجابة عليها بشكل صحيح بشكل متكرر من قبل الطلاب ذوي الأداء العالي. كانت العناصر 11 و 21 لديها أعلى تمييز (D = 0.60)، تليها العنصر 18 (D = 0.50). على العكس، أظهرت العناصر 13 و 19 تمييزًا سلبيًا (-0.10)، بينما كان لدى ثلاثة عناصر قيمة تمييز صفر، مما يشير إلى عدم وجود تمييز بين المجموعات العليا والسفلى. تسلط هذه النتائج الضوء على الحاجة إلى مراجعة دقيقة للعناصر ذات التمييز السلبي أو الصفري لضمان صلاحيتها وفعاليتها في تقييم مجموعة من المطالب المعرفية.

المناقشة

في هذه الدراسة، تم إجراء تحليل وصفي كمي على اختبار رياضيات مكون من 25 عنصرًا متعدد الخيارات للصف الخامس، مع التركيز على صعوبة العنصر، والتمييز، وأداء المشتتات ضمن إطار نظرية الاختبار الكلاسيكية (CTT). كشفت التحليلات أن الغالبية العظمى من العناصر كانت سهلة، حيث تم تصنيف 23 عنصرًا على أنها كذلك، مما حد من قدرة الأداة على تمييز أداء الطلاب عبر نطاق أوسع. تفاوتت قيم التمييز بشكل كبير، حيث أظهرت بعض العناصر تمييزًا سلبيًا، مما يشير إلى مشاكل محتملة في مفاتيح العناصر أو توافق المحتوى. تؤكد الدراسة أنه بينما قد يكون الاختبار فعالًا في تقييم الإتقان الأساسي، فإنه يفتقر إلى التوازن اللازم لتقييم أكثر دقة لفهم الطلاب.

تسلط النتائج الضوء على أهمية نهج منهجي لتحليل العناصر، مقترحة أن القرارات بشأن الاحتفاظ بالعناصر أو مراجعتها يجب أن تستند إلى تلاقي الأدلة من الصعوبة، والتمييز، وأداء المشتتات بدلاً من العتبات التعسفية. تم تحديد العناصر التي تظهر تمييزًا قويًا ومشتتات معقولة كمرشحين للاحتفاظ، بينما تم الإشارة إلى تلك ذات التمييز السلبي أو الصفري للمراجعة. تدعو الدراسة إلى عملية ضمان جودة دورية في التقييمات الصفية، والتي تشمل تطوير مخطط، وإجراء مراجعات من الأقران، ومراجعة العناصر بناءً على بيانات الأداء التجريبية. تشمل قيود الدراسة حجم العينة الصغيرة وغياب مصفوفة استجابة كاملة، مما يحد من تقييم الاتساق الداخلي والصلاحية الأوسع. يجب أن تهدف الأبحاث المستقبلية إلى تضمين مجموعات أكبر واستخدام طرق نفسية متقدمة لتعزيز موثوقية وصلاحية التقييمات الصفية.

القيود

تسلط قسم القيود الضوء على عدة قيود حاسمة تؤثر على تفسير نتائج الدراسة. أولاً، حجم العينة الصغيرة (N = 35) والاعتماد على إدارة اختبار واحدة يثيران مخاوف بشأن استقرار مؤشرات نظرية الاختبار الكلاسيكية (CTT)، مما يحد من قابليتها للتعميم. بالإضافة إلى ذلك، أعاق غياب مصفوفة استجابة كاملة للأشخاص حسب العناصر تحليل الاتساق الداخلي وتقييمات درجات المشاركين. واجهت الدراسة أيضًا قيودًا في صلاحية المحتوى، حيث اعتمدت فقط على مخطط الاختبار دون تحقق رسمي من الخبراء، أو تحليل صلاحية البناء، أو مقابلات معرفية. علاوة على ذلك، كان تحليل أداء المشتتات وصفيًا، يفتقر إلى فترات الثقة أو طرق إعادة أخذ العينات.

لمعالجة هذه القيود، يجب أن تشمل الأبحاث المستقبلية مجموعات بيانات أكبر من مدارس متعددة وإدارات اختبار متكررة. سيمكن ذلك من تطبيق نظرية استجابة العناصر (IRT) أو نمذجة راش لتقدير صعوبة العناصر والتمييز على مقياس كامن، بالإضافة إلى إنتاج وظائف معلومات العناصر وخرائط الأشخاص والعناصر. يمكن أن تؤكد التحليل المقارن لنتائج CTT وIRT أولويات المراجعة المحددة عبر أطر نفسية مختلفة. بالإضافة إلى ذلك، يُوصى بإجراء مقابلات معرفية نوعية لاستكشاف الأسباب وراء اختيارات الطلاب للمشتتات، خاصة بالنسبة للعناصر التي تظهر تمييزًا سلبيًا. بشكل عام، يجب أن تُعتبر النتائج كخط أساس تشخيصي لمراجعة العناصر بدلاً من تأكيد نهائي لأداة التقييم.

Journal: Jurnal Penelitian, Volume: 11, Issue: 2
DOI: https://doi.org/10.46491/jp.v11i2.2550
Publication Date: 2026-08-20
Author(s): M. Lis Haryanto et al.
Primary Topic: Psychometric Methodologies and Testing

Overview

This study assessed the psychometric properties of a 25-item multiple-choice mathematics test focused on perimeter and area, administered to 35 fifth-grade students. Utilizing a Classical Test Theory framework, the analysis revealed that 23 items were categorized as easy (item difficulty $P$ ranging from 0.71 to 0.91), with only two items being moderately difficult ($P = 0.69$). Discrimination indices ($D$) varied significantly, from -0.10 to 0.60, indicating that while six items demonstrated good discrimination, three had zero discrimination and two exhibited negative values. Additionally, distractor analysis highlighted uneven functioning, particularly for items with concentrated response patterns.

The findings suggest that while the test is effective for assessing basic mastery, it lacks the necessary balance to differentiate students across a wider ability spectrum. The study proposes a framework for item revision, recommending the retention of strong items, verification of those with negative discrimination, revision of zero-discrimination items, and reconstruction of weak distractors based on common misconceptions. Limitations include the small sample size and the inability to estimate internal-consistency reliability due to incomplete response data. Future research is encouraged to involve larger, multi-school samples and to apply advanced methodologies such as Item Response Theory (IRT) to enhance the test’s psychometric robustness and instructional utility.

Introduction

The introduction of the research paper emphasizes the critical role of high-quality classroom assessments in accurately reflecting students’ foundational knowledge in elementary mathematics. It highlights that merely aligning test items with content is insufficient; empirical analysis of item performance post-administration is essential. Utilizing Classical Test Theory (CTT), the study examines key indicators such as item difficulty (P), discrimination (D), and distractor functioning to assess item effectiveness. A higher P value indicates easier items, while D measures the ability of items to differentiate between high- and low-performing students. The paper notes that reliance on very easy items can obscure meaningful differences among students, particularly those at the higher end of the ability spectrum, and that poorly functioning distractors can compromise item discrimination.

The study aims to bridge the gap in empirical evidence regarding item performance in elementary classroom assessments, which differ from professional examinations due to smaller cohorts and less formalized item banks. By integrating difficulty, discrimination, and option-level response patterns into a decision-oriented framework, the research seeks to provide actionable insights for teachers on which items to retain, revise, or review. The analysis focuses on a 25-item fifth-grade mathematics test concerning perimeter and area, guided by three central questions regarding item distribution, discrimination effectiveness, and distractor analysis. The findings are intended to offer practical recommendations while acknowledging the limitations inherent in conclusions drawn from small sample sizes.

Methods

The “Methods” section of the research paper outlines the experimental design and analytical techniques employed to investigate the research questions. The study utilized a quantitative approach, incorporating statistical analyses to evaluate the data collected from various experiments. Specific methodologies included controlled experiments, where variables were systematically manipulated to observe their effects on the outcomes of interest.

Data collection involved both qualitative and quantitative measures, ensuring a comprehensive understanding of the phenomena under study. The analysis was performed using standard statistical software, applying techniques such as regression analysis and hypothesis testing to derive meaningful conclusions from the data. The methods were rigorously designed to minimize bias and enhance the reliability of the findings, thereby contributing to the overall validity of the research outcomes.

Results

The analysis of the assessment results, encompassing 35 response records across 25 items, primarily focused on item-level evidence due to the absence of a complete person-by-item matrix. The observed P values ranged from 0.69 to 0.91, indicating that a significant majority of participants answered most items correctly. This high facility suggests either strong student mastery or a lack of challenging items, with the item-difficulty distribution heavily skewed towards easy questions. Specifically, only items 1 and 11 were categorized as moderate (P = 0.69), while 23 items were classified as easy (P = 0.71-0.91), with item 5 exhibiting the highest facility value (P = 0.91). Consequently, 92% of the assessment consisted of easy items, limiting its effectiveness in distinguishing higher levels of mastery among students.

Item discrimination varied considerably, with values ranging from -0.10 to 0.60. Six items demonstrated good or very good discrimination, indicating they were answered correctly more frequently by higher-performing students. Items 11 and 21 had the highest discrimination (D = 0.60), followed by item 18 (D = 0.50). Conversely, items 13 and 19 exhibited negative discrimination (-0.10), while three items had a discrimination value of zero, suggesting no differentiation between upper and lower groups. These findings highlight the need for careful review of items with negative or zero discrimination to ensure their validity and effectiveness in assessing a range of cognitive demands.

Discussion

In this study, a quantitative descriptive analysis was conducted on a 25-item multiple-choice mathematics test for fifth graders, focusing on item difficulty, discrimination, and distractor functioning within the Classical Test Theory (CTT) framework. The analysis revealed that the majority of items were easy, with 23 items classified as such, which limited the instrument’s ability to differentiate student performance across a broader range. Discrimination values varied significantly, with some items showing negative discrimination, indicating potential issues with item keying or content alignment. The study emphasizes that while the test may effectively assess basic mastery, it lacks the necessary balance for more nuanced evaluation of student understanding.

The findings highlight the importance of a systematic approach to item analysis, suggesting that decisions regarding item retention or revision should be based on a convergence of evidence from difficulty, discrimination, and distractor performance rather than arbitrary thresholds. Items exhibiting strong discrimination and plausible distractors were identified as candidates for retention, while those with negative or zero discrimination were flagged for review. The study advocates for a cyclical quality-assurance process in classroom assessments, which includes developing a blueprint, conducting peer reviews, and revising items based on empirical performance data. Limitations of the study include the small sample size and the absence of a complete response matrix, which restricts the evaluation of internal consistency and broader validity. Future research should aim to include larger cohorts and utilize advanced psychometric methods to enhance the reliability and validity of classroom assessments.

Limitations

The section on limitations highlights several critical constraints affecting the interpretation of the study’s findings. Firstly, the small sample size (N = 35) and the reliance on a single test administration raise concerns about the stability of Classical Test Theory (CTT) indices, limiting their generalizability. Additionally, the lack of a complete person-by-item response matrix hindered internal consistency analysis and participant-level score evaluations. The study also faced limitations in content validity, as it relied solely on the test blueprint without formal expert validation, construct validity analysis, or cognitive interviews. Furthermore, the analysis of distractor functioning was descriptive, lacking confidence intervals or resampling methods.

To address these limitations, future research should involve larger, multi-school datasets and repeated test administrations. This would enable the application of Item Response Theory (IRT) or Rasch modeling to estimate item difficulty and discrimination on a latent scale, as well as to produce item-information functions and person-item maps. A comparative analysis of CTT and IRT results could validate the identified revision priorities across different psychometric frameworks. Additionally, qualitative cognitive interviews are recommended to explore the reasons behind students’ choices of distractors, particularly for items exhibiting negative discrimination. Overall, the findings should be viewed as a diagnostic baseline for item revision rather than a definitive validation of the assessment instrument.