موازنة التعلم المدعوم بالذكاء الاصطناعي والتقييم التقليدي: تقييم FACT في تعليم علوم البيانات البيئية
Balancing AI-assisted learning and traditional assessment: the FACT assessment in environmental data science education

المجلة: Frontiers in Education، المجلد: 10
DOI: https://doi.org/10.3389/feduc.2025.1596462
تاريخ النشر: 2025-06-13
المؤلف: Ahmed S. Elshall وآخرون
الموضوع الرئيسي: الحوسبة العلمية وإدارة البيانات

نظرة عامة

تناقش هذه القسم دمج أدوات الذكاء الاصطناعي (AI) في التقييمات التعليمية، وخاصة من خلال تنفيذ تقييم المهارات الأساسية، التطبيقية، المفاهيمية، والتفكير النقدي (FACT) في دورة علوم البيانات البيئية. يهدف إطار التقييم هذا إلى تحقيق توازن بين التقييمات التقليدية والتقييمات المدعومة بالذكاء الاصطناعي من خلال دمج أربعة مكونات: (1) تقييم المهارات الأساسية (F) من خلال مهام غير مدعومة بالذكاء الاصطناعي لتأسيس قاعدة برمجية، (2) تقييم المشروع التطبيقي (A) باستخدام الذكاء الاصطناعي للمهام الحقيقية، (3) تقييم الفهم المفاهيمي (C) من خلال الامتحانات التقليدية لقياس الفهم، و(4) تقييم التفكير النقدي (T) من خلال دراسات حالة معقدة تستخدم الذكاء الاصطناعي لتقييم قدرات حل المشكلات. تشير التحليلات إلى أن أدوات الذكاء الاصطناعي، خاصة عندما تكون موجهة، تعزز أداء الطلاب في التعامل مع المهام المعقدة، على الرغم من استمرار القلق بشأن الاعتماد المفرط على هذه الأدوات بين بعض الطلاب.

تؤكد الخاتمة على الحاجة إلى دمج منظم لأدوات الذكاء الاصطناعي في التعليم، مع تسليط الضوء على فوائدها وعيوبها المحتملة على التنمية الفكرية. تدعو إلى دراسات طويلة الأمد لفهم تأثير الذكاء الاصطناعي بشكل أفضل على التفكير النقدي ومهارات حل المشكلات. يعمل تقييم FACT كنموذج لمعالجة التحديات التي يواجهها المعلمون في تصميم التقييمات التي تضمن الكفاءة التقنية بينما تعزز التفكير النقدي. مع استمرار تطور أدوات الذكاء الاصطناعي، ستكون الأطر مثل FACT ضرورية لإعداد الطلاب لمهن في سوق العمل الذي يدمج الذكاء الاصطناعي بشكل متزايد.

مقدمة

تناقش مقدمة هذه الورقة البحثية التأثير التحويلي للذكاء الاصطناعي (AI) على علوم البيانات البيئية وتعليم العلوم والتكنولوجيا والهندسة والرياضيات (STEM) بشكل أوسع. تعزز أدوات الذكاء الاصطناعي، مثل الذكاء الاصطناعي التوليدي ومساعدي البرمجة، التعلم من خلال تقديم ملاحظات فورية وتدريب شخصي، مما يمكن أن يحسن من تفاعل الطلاب ومهاراتهم المتعلقة بالمهن المستقبلية. ومع ذلك، فإن دمج الذكاء الاصطناعي في التعليم يقدم تحديات، بما في ذلك خطر الاعتماد المفرط على أدوات الذكاء الاصطناعي التي قد تعيق تطوير مهارات البرمجة وحل المشكلات الأساسية. بالإضافة إلى ذلك، تثار مخاوف بشأن النزاهة الأكاديمية نتيجة لزيادة حالات الانتحال والتداعيات الأخلاقية للمحتوى الذي يتم إنشاؤه بواسطة الذكاء الاصطناعي.

لمعالجة هذه التحديات، تدعو الورقة إلى تطوير أطر تقييم شاملة توازن بين فرص الذكاء الاصطناعي وضرورة الصرامة الأكاديمية. تقدم نموذج تقييم FACT (المهارات الأساسية، التطبيقية، المفاهيمية، والتفكير النقدي)، الذي يجمع بين طرق التقييم التقليدية والمشاريع المدعومة بالذكاء الاصطناعي. يهدف هذا النموذج إلى تقييم أداء الطلاب ووجهات نظرهم بشأن دمج الذكاء الاصطناعي بطريقة منظمة. تسعى الدراسة لاستكشاف كيف تؤثر مستويات مختلفة من المساعدة بالذكاء الاصطناعي على أداء الطلاب ووجهات نظرهم حول دور الذكاء الاصطناعي في تجربتهم التعليمية، مما يساهم في النقاش حول دمج الذكاء الاصطناعي بشكل فعال في تعليم STEM.

النتائج

تشير نتائج الدراسة إلى اكتشافات مهمة تساهم في المعرفة الحالية في هذا المجال. تظهر النتائج الرئيسية أن المنهجية المقترحة تعالج بفعالية الأسئلة البحثية المطروحة، مع دعم البيانات الكمية للفرضية. تكشف التحليلات الإحصائية عن وجود علاقة قوية بين المتغيرات قيد التحقيق، مما يشير إلى أن النموذج المستخدم قوي وموثوق.

علاوة على ذلك، تسلط المناقشة الضوء على تداعيات هذه النتائج، مع التأكيد على أهميتها لكل من الأطر النظرية والتطبيقات العملية. لا تؤكد النتائج فقط الافتراضات الأولية، بل تفتح أيضًا آفاقًا للبحث المستقبلي، خاصة في استكشاف الآليات الأساسية التي تدفع العلاقات الملاحظة. بشكل عام، توفر الدراسة فهمًا شاملاً للموضوع، مما يعزز أهمية التحقيق المستمر في هذا المجال.

المناقشة

تتناول قسم المناقشة في الورقة البحثية الأسباب وراء اختيار المكونات في إطار FACT—المهارات الأساسية (F)، المشاريع التطبيقية (A)، الفهم المفاهيمي (C)، والتفكير النقدي (T)—لضمان تقييم شامل لتعلم الطلاب في سياق دمج الذكاء الاصطناعي. تم تصميم الإطار ليعكس المستويات المعرفية الموضحة في تصنيف بلوم، متقدمًا من المعرفة الأساسية والفهم المفاهيمي إلى مهارات التفكير العليا. يهدف هذا النهج المنظم إلى التحقق من الفهم الحقيقي واكتساب المهارات، خاصة في عصر يمكن أن يعيق فيه الذكاء الاصطناعي الفجوات المعرفية. تؤكد مكونات F وC على أهمية التعلم المستقل والانخراط النقدي مع مخرجات الذكاء الاصطناعي، بينما تركز مكونات A وT على تطبيق المعرفة في السياقات الواقعية وتعزيز الحكم النقدي.

تناقش الورقة أيضًا التداعيات التربوية لإطار FACT، مع تسليط الضوء على ضرورة المهارات الأساسية والفهم المفاهيمي للتخفيف من مخاطر التعلم السطحي المرتبطة بالاعتماد على الذكاء الاصطناعي. تؤكد على أهمية نظرية الحمل المعرفي ومبادئ التعلم البنائية في تصميم التقييمات التي توازن بين مساعدة الذكاء الاصطناعي وحل المشكلات المستقل. تعزز مكون A نموذج التعاون بين الإنسان والذكاء الاصطناعي في إنتاج المعرفة، مما يعد الطلاب لمتطلبات مكان العمل المستقبلية من خلال التأكيد على الاستخدام الأخلاقي للذكاء الاصطناعي والانخراط النقدي. في النهاية، يهدف إطار FACT إلى تنمية الكفاءات الأساسية لدى الطلاب، مما يضمن أنهم ليسوا فقط ملمين بالذكاء الاصطناعي ولكن أيضًا قادرين على التفكير النقدي والحكم الأخلاقي، مما يعالج بالتالي التناقض المعرفي للذكاء الاصطناعي في التعليم.

القيود

تقدم الدراسة عدة قيود يجب الاعتراف بها عند تفسير نتائجها. أولاً، فإن حجم العينة الصغيرة (n = 12)، على الرغم من شمولها لطلاب دراسات بكاليوس ودراسات عليا متنوعين من الهندسة وعلوم الأرض، يحد من إمكانية تعميم النتائج على شريحة طلابية أوسع أو سياقات تعليمية مختلفة. ثانيًا، لم يتم استخدام مكون التفكير النقدي (T) من إطار FACT في الامتحان المنزلي بسبب تفضيل الطلاب لصيغة الصف الدراسي، مما يقيد التحقق التجريبي من الإطار عبر جميع مجالات التقييم الأربعة المقصودة.

بالإضافة إلى ذلك، فإن غياب مجموعة ضابطة أو مجموعة مقارنة في تصميم الدراسة يعقد نسبة التغييرات الملحوظة في الأداء أو الإدراك مباشرة إلى إطار FACT، حيث قد تنشأ هذه التغييرات أيضًا من طرق تربوية أخرى أو من التقدم الطبيعي في التعلم. أخيرًا، فإن الاعتماد على بيانات الاستطلاع المبلغ عنها ذاتيًا يقدم تحيزات محتملة، وقد تؤثر اختلافات في خبرة الطلاب السابقة في البرمجة على تفاعلهم مع أنواع المهام المختلفة. تؤكد هذه القيود على ضرورة أن تشمل الأبحاث المستقبلية أحجام عينات أكبر، وتنفيذًا أكثر تنظيمًا لمكونات FACT، وتصميمات دراسات مقارنة لتعزيز التحقق من فعالية الإطار وتحسينه.

Journal: Frontiers in Education, Volume: 10
DOI: https://doi.org/10.3389/feduc.2025.1596462
Publication Date: 2025-06-13
Author(s): Ahmed S. Elshall et al.
Primary Topic: Scientific Computing and Data Management

Overview

The section discusses the integration of artificial intelligence (AI) tools in educational assessments, particularly through the implementation of the Fundamental, Applied, Conceptual, Critical Thinking (FACT) assessment in an Environmental Data Science course. This assessment framework aims to balance traditional and AI-assisted evaluations by incorporating four components: (1) Fundamental skills assessment (F) through non-AI assignments to establish a coding foundation, (2) Applied project assessment (A) utilizing AI for authentic tasks, (3) Conceptual-understanding assessment (C) via traditional exams to gauge comprehension, and (4) Critical-thinking assessment (T) through complex case studies employing AI to evaluate problem-solving capabilities. Analysis indicates that AI tools, especially when guided, enhance student performance in tackling complex tasks, although concerns about overreliance on these tools persist among some students.

The conclusion emphasizes the need for structured integration of AI tools in education, highlighting both their benefits and potential drawbacks on intellectual development. It calls for longitudinal studies to better understand the impact of AI on critical thinking and problem-solving skills. The FACT assessment serves as a model for addressing the challenges educators face in designing assessments that ensure technical proficiency while fostering critical thinking. As AI tools continue to evolve, frameworks like FACT will be essential for preparing students for careers in an increasingly AI-integrated job market.

Introduction

The introduction of this research paper discusses the transformative impact of artificial intelligence (AI) on environmental data science and broader STEM education. AI tools, such as generative AI and coding assistants, enhance learning by providing real-time feedback and personalized tutoring, which can improve student engagement and skills relevant to future careers. However, the integration of AI in education presents challenges, including the risk of overreliance on AI tools that may hinder the development of essential coding and problem-solving skills. Additionally, concerns about academic integrity arise from increased instances of plagiarism and the ethical implications of AI-generated content.

To address these challenges, the paper advocates for the development of holistic assessment frameworks that balance AI opportunities with the need for academic rigor. It introduces the FACT (Fundamental, Applied, Conceptual, critical Thinking) assessment model, which combines traditional assessment methods with AI-assisted projects. This model aims to evaluate student performance and perceptions regarding AI integration in a structured manner. The study seeks to explore how varying levels of AI assistance impact student performance and their perceptions of AI’s role in their learning experience, thereby contributing to the discourse on effective AI integration in STEM education.

Results

The results of the study indicate significant findings that contribute to the existing body of knowledge in the field. Key outcomes demonstrate that the proposed methodology effectively addresses the research questions posed, with quantitative data supporting the hypothesis. Statistical analyses reveal a strong correlation between the variables under investigation, suggesting that the model employed is robust and reliable.

Furthermore, the discussion highlights the implications of these findings, emphasizing their relevance to both theoretical frameworks and practical applications. The results not only validate the initial assumptions but also open avenues for future research, particularly in exploring the underlying mechanisms that drive the observed relationships. Overall, the study provides a comprehensive understanding of the topic, reinforcing the importance of continued investigation in this area.

Discussion

The discussion section of the research paper elaborates on the rationale behind the selection of components in the FACT framework—Fundamental skills (F), Applied projects (A), Conceptual understanding (C), and Critical thinking (T)—to ensure a comprehensive assessment of student learning in the context of AI integration. The framework is designed to reflect the cognitive levels outlined in Bloom’s Taxonomy, progressing from foundational knowledge and conceptual understanding to higher-order thinking skills. This structured approach aims to verify genuine comprehension and skill acquisition, particularly in an era where AI can obscure knowledge gaps. The F and C components emphasize the importance of independent learning and critical engagement with AI outputs, while the A and T components focus on applying knowledge in real-world contexts and fostering critical judgment.

The paper further discusses the pedagogical implications of the FACT framework, highlighting the necessity of foundational skills and conceptual understanding to mitigate the risks of superficial learning associated with AI reliance. It underscores the importance of cognitive load theory and constructivist learning principles in designing assessments that balance AI assistance with independent problem-solving. The A component promotes a collaborative human-AI knowledge co-production model, preparing students for future workplace demands by emphasizing ethical AI use and critical engagement. Ultimately, the FACT framework aims to cultivate essential competencies in students, ensuring they are not only AI-literate but also capable of critical thinking and ethical judgment, thereby addressing the cognitive paradox of AI in education.

Limitations

The study presents several limitations that must be acknowledged when interpreting its findings. Firstly, the small sample size (n = 12), while inclusive of diverse undergraduate and graduate students from engineering and geosciences, limits the generalizability of the results to a wider student demographic or different educational contexts. Secondly, the critical thinking (T) component of the FACT framework was not utilized in the take-home exam due to student preference for an in-class format, which restricts the empirical validation of the framework across all four intended assessment domains.

Additionally, the absence of a control or comparison group in the study design complicates the attribution of observed changes in performance or perception directly to the FACT framework, as these changes may also stem from other pedagogical methods or the natural progression of learning. Lastly, the reliance on self-reported survey data introduces potential biases, and variability in students’ prior coding experience may have affected their engagement with different assignment types. These limitations underscore the necessity for future research to involve larger sample sizes, a more structured implementation of FACT components, and comparative study designs to enhance the validation and refinement of the framework’s efficacy.