ChatGPT في الفصل الدراسي: تقييم دوره في تعزيز مهارات التقييم النقدي
ChatGPT in the Classroom: Evaluating its Role in Fostering Critical Evaluation Skills

المجلة: International Journal of Artificial Intelligence in Education، المجلد: 35، العدد: 4
DOI: https://doi.org/10.1007/s40593-024-00452-8
تاريخ النشر: 2025-01-24
المؤلف: Angela Oates وآخرون
الموضوع الرئيسي: الذكاء الاصطناعي في الرعاية الصحية والتعليم

نظرة عامة

تستكشف الدراسة دور ChatGPT في تعزيز مهارات التقييم النقدي بين طلاب الماجستير في العلوم الطبية الحيوية، مع تسليط الضوء على إمكانياته وقيوده في السياقات التعليمية. من خلال اعتماد نهج مزدوج يتضمن كتابة مقالات بواسطة الذكاء الاصطناعي تليها تقييمات نقدية يقودها الطلاب، كانت تهدف المشروع إلى تحسين قدرات التقييم لدى المتعلمين. بينما أنتج ChatGPT مقالات تتمتع بتماسك هيكلي ودقة نحوية، إلا أنه لم يعزز الأداء الأكاديمي بشكل كبير، كما يتضح من توافق علامات المشاركين للمقالات التي تم إنشاؤها بواسطة الذكاء الاصطناعي مع درجاتهم العامة في المقرر. ومع ذلك، أظهر الطلاب أداءً محسنًا في تقييماتهم النقدية، مما يشير إلى أن ChatGPT أكثر فعالية كأداة تقييم بدلاً من كونه مساعدة مباشرة في كتابة المقالات.

تؤكد النتائج على الحاجة إلى دمج مدروس للذكاء الاصطناعي في التعليم، مع التأكيد على أهمية تطوير معرفة الذكاء الاصطناعي بين الطلاب. بينما يمكن أن يسهل ChatGPT عملية المسودة الأولية والتقييم، إلا أنه لا يمكن أن يحل محل عمق الاستفسار الذي يقوده البشر. كما تبرز الاعتبارات الأخلاقية المتعلقة بالنزاهة الأكاديمية، والأصالة، والوصول العادل إلى أدوات الذكاء الاصطناعي كعوامل حاسمة للمؤسسات التعليمية. تدعو الدراسة إلى نهج مختلط في الكتابة الأكاديمية والتقييم، يجمع بين القدرات الحسابية للذكاء الاصطناعي وبين التفكير النقدي والاعتبارات الأخلاقية الأساسية التي تميز المنح الدراسية البشرية، مما يعد الطلاب في النهاية لتحديات المشهد المهني.

مقدمة

تناقش مقدمة هذه الورقة البحثية التأثير التحويلي للذكاء الاصطناعي (AI) على التعليم، مع تسليط الضوء على دمجه في بيئات التعلم التقليدية. يشير المؤلفون إلى أن تقنيات الذكاء الاصطناعي، مثل منصات التعلم التكيفية والوكلاء المحادثين، قد أحدثت ثورة في الممارسات التعليمية من خلال توفير تجارب تعلم مخصصة وتعليقات فورية. تتيح هذه التطورات للمعلمين تخصيص التعليم وفقًا لاحتياجات الطلاب الفردية، مما يعالج أنماط التعلم المتنوعة ويعزز المشاركة. يمثل ظهور أدوات الذكاء الاصطناعي التوليدية، مثل ChatGPT، هذا التحول، مما يمكّن من تفاعلات ديناميكية تحاكي علاقات المعلم والطالب وتعزز بيئة تعلم أكثر استجابة.

تؤكد الورقة على الدور المزدوج للذكاء الاصطناعي في التعليم: كمسهل للتعلم المخصص وكخطر محتمل إذا تم الاعتماد عليه بشكل مفرط. بينما يمكن أن يعزز الذكاء الاصطناعي التفكير النقدي ومهارات الكتابة من خلال توفير تعليقات فورية وتسهيل عمليات التعلم التكرارية، يحذر المؤلفون من مخاطر الاعتماد، التي قد تقيد الفكر الأصلي والإبداع. يقترحون إطارًا تربويًا يدمج الذكاء الاصطناعي كأداة داعمة بدلاً من بديل للجهد الفكري، داعين إلى استخدام مسؤول يشجع على التفاعل الأعمق مع المواد الأكاديمية. تهدف الدراسة إلى إعادة وضع الذكاء الاصطناعي من مجرد معالجة التحديات التعليمية إلى تطوير مهارات أكاديمية أساسية، مما يثري تجربة التعلم مع الحفاظ على النزاهة الأكاديمية.

الطرق

شملت الدراسة عشرة طلاب دراسات عليا من جامعة ليدز بيكيت، تحديدًا من برامج الماجستير في الميكروبيولوجيا الطبية، الكيمياء الحيوية الطبية، أو العلوم الطبية الحيوية. تم تجنيد المشاركين من خلال حملة بريد إلكتروني توضح أهداف الدراسة وتؤكد على المشاركة الطوعية. قدمت جلسة توجيهية نظرة شاملة على أنشطة البحث، بما في ذلك مناقشات حول مزايا وعيوب ChatGPT، خاصة فيما يتعلق بالدقة والنزاهة الأكاديمية. شارك المشاركون في تمارين عملية تتعلق بتوليد المقالات، مع التركيز على سؤال محدد حول تأثير جائحة COVID-19 على العلوم الطبية الحيوية.

تطلب النشاط الرئيسي من المشاركين استخدام ChatGPT لتوليد مقال ثم تقييمه نقديًا باستخدام الأدبيات التي تمت مراجعتها من قبل الأقران. استمر عملية التقييم لمدة أربعة أسابيع، حيث قام المشاركون بتوثيق مطالباتهم وتقديم مقالاتهم مع التقييمات. تم تقييم المقالات بناءً على معايير محددة مسبقًا، مع التركيز على السلامة الهيكلية، ودقة المحتوى، والامتثال لسؤال المقال. تم استخدام التحليل الإحصائي باستخدام SPSS v28، وتحديدًا اختبارات T، لتحديد الفروق المهمة بين المتوسطات الأكاديمية للمشاركين وعلاماتهم في المشروع. بالإضافة إلى ذلك، تم جمع وجهات نظر المشاركين من خلال مجموعة تركيز واستبيان منظم، والذي شمل كل من الإجابات متعددة الخيارات والنصوص الحرة. تم استخدام التحليل الموضوعي لتفسير البيانات النوعية، مع ضمان الالتزام بالبروتوكولات الأخلاقية طوال الدراسة.

المناقشة

تسلط قسم المناقشة في الورقة البحثية الضوء على الدور المعقد لـ ChatGPT في الكتابة الأكاديمية والتقييم، خاصة ضمن برنامج العلوم على مستوى الماجستير. بينما وجدت الدراسة عدم وجود فرق كبير بين علامات المقالات ومتوسطات الدورة العامة، لوحظ تحسن ملحوظ في التقييمات النقدية، مما يشير إلى أن الطلاب تفوقوا في هذا المجال بفضل استراتيجيات تربوية مستهدفة. تشير النتائج إلى أن مهارات التقييم النقدي ضرورية ليس فقط للنجاح الأكاديمي ولكن أيضًا للجهود المهنية المستقبلية، مما يستدعي إعادة النظر في أنواع التقييم في المناهج الدراسية.

عبر المشاركون عن مخاوفهم بشأن قيود ChatGPT، خاصة عدم قدرته على الوصول إلى قواعد البيانات التي تمت مراجعتها من قبل الأقران، مما يقوض عمق ومصداقية المحتوى الذي يتم إنشاؤه بواسطة الذكاء الاصطناعي. على الرغم من قوته في القواعد والتركيب، قد يعيق الاعتماد على الذكاء الاصطناعي لتوليد المحتوى تطوير مهارات التفكير النقدي والبحث. تدعو الدراسة إلى استخدام الذكاء الاصطناعي كأداة لتوليد المحتوى الذي يمكن للطلاب تقييمه نقديًا، مما يعزز التفاعل الأعمق ويعزز قدراتهم التحليلية. يتماشى هذا النهج مع القوة الملحوظة في مهارات التقييم النقدي لدى الطلاب وقد يؤدي إلى تجربة تعلم أكثر تفاعلية وفعالية، بينما يثير أيضًا اعتبارات أخلاقية مهمة بشأن استخدام الذكاء الاصطناعي في الأكاديمية.

القيود

تنبع قيود ChatGPT، كما تم مناقشتها في الدراسة، بشكل أساسي من عدم قدرته على الوصول إلى المصادر الأكاديمية التي تمت مراجعتها من قبل الأقران، وهو أمر حاسم للعمل على مستوى الماجستير. تعيق هذه القيود فعالية الأداة في توليد محتوى يلبي عمق وشمولية البحث المطلوب في السياقات الأكاديمية المتقدمة. وبالتالي، بينما قد يساعد ChatGPT في المراحل الأولية من البحث، إلا أنه لا يمكن أن يحل محل مراجعات الأدبيات الشاملة والتحليل الأكاديمي. تتطلب هذه القيود توخي الحذر بين الطلاب بشأن الاعتماد المفرط على أدوات الذكاء الاصطناعي، حيث يجب عليهم الاستمرار في التفاعل بعمق مع الأدبيات الأكاديمية لتلبية المعايير الأكاديمية. بالنسبة للمعلمين، تثير هذه النقاط اعتبارات مهمة حول الدمج المناسب للذكاء الاصطناعي في المناهج الدراسية، مما يشير إلى أن استخدامه يجب أن يتم تحديده بوضوح وتقييده في الدورات المتقدمة.

بالإضافة إلى ذلك، فإن نتائج الدراسة مقيدة بحجم عينة صغيرة من عشرة مشاركين، مما يثير مخاوف بشأن قابلية تعميم النتائج. قد لا تعكس تجانس العينة، التي تتكون أساسًا من طلاب متحمسين ومتمكنين تقنيًا، الاحتياجات المتنوعة للسكان الطلابي الأوسع. قد تؤدي هذه القيود إلى تفسيرات منحازة، مما قد يغفل التحديات التي يواجهها المتعلمون الأقل كفاءة في التكنولوجيا. يجب أن تهدف الأبحاث المستقبلية إلى تضمين مجموعة أكبر وأكثر تنوعًا من المشاركين لتعزيز قابلية تطبيق النتائج عبر سياقات تعليمية متنوعة. علاوة على ذلك، تقترح الدراسة استكشاف دور الدعم التعليمي في المهام المعتمدة على الذكاء الاصطناعي، حيث يمكن أن يساعد فهم كيفية تأثير الإرشاد على تفاعل المتعلمين النقدي في تطوير استراتيجيات تربوية فعالة تدمج أدوات الذكاء الاصطناعي بشكل أخلاقي في التعليم.

Journal: International Journal of Artificial Intelligence in Education, Volume: 35, Issue: 4
DOI: https://doi.org/10.1007/s40593-024-00452-8
Publication Date: 2025-01-24
Author(s): Angela Oates et al.
Primary Topic: Artificial Intelligence in Healthcare and Education

Overview

The study investigates the role of ChatGPT in enhancing critical evaluation skills among master’s students in biomedical science, highlighting both its potential and limitations in educational contexts. By employing a dual approach of AI-generated essay writing followed by student-led critical evaluations, the project aimed to improve learners’ evaluative abilities. While ChatGPT produced essays with structural coherence and grammatical accuracy, it did not significantly enhance academic performance, as evidenced by the alignment of participant marks for AI-generated essays with their overall module scores. However, students demonstrated improved performance in their critical evaluations, suggesting that ChatGPT is more effective as an assessment tool rather than a direct aid in essay writing.

The findings underscore the need for a nuanced integration of AI in education, emphasizing the importance of developing AI literacy among students. While ChatGPT can facilitate initial drafting and assessment, it cannot replace the depth of human-led inquiry. Ethical considerations surrounding academic integrity, originality, and equitable access to AI tools also emerge as critical factors for educational institutions. The study advocates for a blended approach to academic writing and assessment, combining AI’s computational capabilities with the essential critical thinking and ethical considerations that characterize human scholarship, ultimately preparing students for the complexities of the professional landscape.

Introduction

The introduction of this research paper discusses the transformative impact of artificial intelligence (AI) on education, highlighting its integration into traditional learning environments. The authors note that AI technologies, such as adaptive learning platforms and conversational agents, have revolutionized educational practices by providing personalized learning experiences and real-time feedback. These advancements allow educators to tailor instruction to individual student needs, thereby addressing diverse learning styles and enhancing engagement. The emergence of generative AI tools, like ChatGPT, exemplifies this shift, enabling dynamic interactions that mimic tutor-student relationships and fostering a more responsive learning environment.

The paper emphasizes the dual role of AI in education: as a facilitator of personalized learning and as a potential risk if over-relied upon. While AI can enhance critical thinking and writing skills by providing immediate feedback and facilitating iterative learning processes, the authors caution against the dangers of dependency, which may stifle original thought and creativity. They propose a pedagogical framework that integrates AI as a supportive tool rather than a substitute for intellectual effort, advocating for responsible use that encourages deeper engagement with academic material. The study aims to reposition AI from merely addressing educational challenges to actively developing essential academic skills, thereby enriching the learning experience while maintaining academic integrity.

Methods

The study involved ten postgraduate students from Leeds Beckett University, specifically from Master’s programs in Medical Microbiology, Medical Biochemistry, or Biomedical Science. Participants were recruited through an email campaign that outlined the study’s objectives and emphasized voluntary participation. An orientation session provided a comprehensive overview of the research activities, including discussions on the merits and drawbacks of ChatGPT, particularly regarding accuracy and academic integrity. Participants engaged in practical exercises related to essay generation, focusing on a specific question about the impact of the COVID-19 pandemic on biomedical science.

The main activity required participants to use ChatGPT to generate an essay and then critically evaluate it using peer-reviewed literature. The evaluation process spanned four weeks, with participants documenting their prompts and submitting their essays along with evaluations. The essays were assessed based on predefined rubrics, focusing on structural integrity, content accuracy, and adherence to the essay question. Statistical analysis using SPSS v28, specifically T-tests, was employed to identify significant differences between participants’ academic averages and their project marks. Additionally, participant perspectives were gathered through a focus group and a structured questionnaire, which included both multiple-choice and free-text responses. Thematic analysis was utilized to interpret the qualitative data, ensuring adherence to ethical protocols throughout the study.

Discussion

The discussion section of the research paper highlights the nuanced role of ChatGPT in academic writing and assessment, particularly within a master’s level science program. While the study found no significant difference between essay marks and overall course averages, a notable improvement was observed in critical evaluations, suggesting that students excelled in this area due to targeted pedagogical strategies. The findings indicate that critical evaluation skills are essential not only for academic success but also for future professional endeavors, prompting a reconsideration of assessment types in curricula.

Participants expressed concerns regarding the limitations of ChatGPT, particularly its inability to access peer-reviewed databases, which undermines the depth and credibility of AI-generated content. Despite its strengths in grammar and structure, reliance on AI for content generation may hinder the development of critical thinking and research skills. The study advocates for using AI as a tool for generating content that students can critically evaluate, thereby fostering deeper engagement and enhancing their analytical capabilities. This approach aligns with the observed strengths in students’ critical evaluation skills and could lead to a more interactive and effective learning experience, while also raising important ethical considerations regarding the use of AI in academia.

Limitations

The limitations of ChatGPT, as discussed in the study, primarily stem from its inability to access peer-reviewed academic sources, which is critical for master’s-level work. This restriction hinders the tool’s effectiveness in generating content that meets the depth and breadth of research required in advanced academic contexts. Consequently, while ChatGPT may assist in initial stages of research, it cannot substitute for comprehensive literature reviews and scholarly analysis. This limitation necessitates caution among students regarding over-reliance on AI tools, as they must still engage deeply with academic literature to fulfill academic standards. For educators, this raises important considerations about the appropriate integration of AI in curricula, suggesting that its use should be clearly defined and limited in advanced courses.

Additionally, the study’s findings are constrained by a small sample size of ten participants, which raises concerns about the generalizability of the results. The homogeneity of the sample, primarily consisting of motivated and tech-savvy students, may not accurately reflect the diverse needs of the broader student population. This limitation could lead to skewed interpretations, potentially overlooking the challenges faced by less technologically adept learners. Future research should aim to include a larger and more diverse participant group to enhance the applicability of findings across various educational contexts. Moreover, the study suggests exploring the role of instructional support in AI-based tasks, as understanding how guidance influences learners’ critical engagement could inform the development of effective pedagogical strategies that ethically incorporate AI tools in education.