التعليقات المدعومة بالذكاء الاصطناعي التوليدي وكتابة اللغة الإنجليزية كلغة أجنبية: دراسة حول الكفاءة، وتكرار المراجعة وجودة الكتابة
Generative AI-assisted feedback and EFL writing: a study on proficiency, revision frequency and writing quality

المجلة: Discover Education، المجلد: 4، العدد: 1
DOI: https://doi.org/10.1007/s44217-025-00602-7
تاريخ النشر: 2025-06-12
المؤلف: Mohamed Mekheimer
الموضوع الرئيسي: أنظمة التعليم الذكي والتعلم التكيفي

نظرة عامة

تدرس هذه الدراسة آثار التغذية الراجعة المدعومة بالذكاء الاصطناعي في الكتابة، تحديدًا من خلال استخدام Grammarly، على كفاءة الكتابة وممارسات المراجعة وجودة الكتابة العامة لدى متعلمي اللغة الإنجليزية كلغة أجنبية (EFL). تم تقسيم ستين طالبًا دراسات عليا في EFL إلى مجموعة تجريبية تستخدم Grammarly ومجموعة ضابطة تتلقى تعليمًا تقليديًا. أظهرت النتائج أن المجموعة التجريبية حققت درجات أعلى بشكل ملحوظ في اختبار ما بعد الكتابة. علاوة على ذلك، كانت هناك علاقات إيجابية بين استخدام ميزات الذكاء الاصطناعي – مثل أدوات القواعد والمفردات – وزيادة تكرار المراجعة، بالإضافة إلى تحسينات في تنظيم المحتوى والتماسك. كشفت البيانات النوعية من المقابلات شبه المنظمة أن التغذية الراجعة المدعومة بالذكاء الاصطناعي عززت مشاركة الطلاب من خلال تقليل الإحباط وزيادة الثقة، بينما أبرزت أيضًا أهمية دمج أدوات الذكاء الاصطناعي مع الأساليب التربوية التقليدية لتعزيز التفكير النقدي.

في الختام، قدمت الدراسة دليلًا تجريبيًا على أن التغذية الراجعة المدعومة بالذكاء الاصطناعي، وخاصة من Grammarly Premium، حسنت بشكل كبير كفاءة الكتابة لدى طلاب EFL، خاصة في استخدام اللغة والتنظيم، على الرغم من عدم وجود مكاسب ملحوظة في المحتوى. أفاد الطلاب بزيادة الثقة والكفاءة في عمليات المراجعة الخاصة بهم، مما يتماشى مع النتائج الكمية. ومع ذلك، أكدوا أيضًا على الحاجة إلى التفاعل النقدي مع اقتراحات الذكاء الاصطناعي واعترافهم بحدود هذه الأدوات في دعم الطلاقة اللغوية الطبيعية. تشير النتائج إلى أنه بينما يمكن لأدوات التغذية الراجعة المدعومة بالذكاء الاصطناعي معالجة مشكلات الكتابة السطحية بشكل فعال، يجب ألا تحل محل استراتيجيات تطوير الكتابة الشاملة. يُشجع المعلمون على تعليم الطلاب كيفية تقييم التغذية الراجعة من الذكاء الاصطناعي بشكل نقدي، مما يضمن استخدام هذه الأدوات لتكملة التعليم التقليدي بدلاً من أن تكون مصدرًا وحيدًا.

مقدمة

تتقدم دمج الذكاء الاصطناعي (AI) في التعليم بسرعة، خاصة في مجال تعلم اللغات، حيث يظهر وعدًا كبيرًا في تعزيز مهارات الكتابة. من الجدير بالذكر أن الأدوات المدفوعة بالذكاء الاصطناعي التي تقدم تغذية راجعة تلقائية للكتابة، مثل أدوات فحص القواعد والأسلوب، قد اكتسبت شعبية بين الطلاب. تدرس هذه الدراسة بشكل خاص استخدام Grammarly، مساعد الكتابة المعزز بالذكاء الاصطناعي، لاستكشاف فعاليته في دعم تطوير الكتابة لدى الطلاب.

تؤكد التوافر الواسع لهذه التطبيقات الذكية على قدرتها على تحويل الممارسات التعليمية، حيث توفر للمتعلمين تغذية راجعة فورية وشخصية يمكن أن تحسن من كفاءتهم في الكتابة. مع استمرار تطور مشهد التكنولوجيا التعليمية، يصبح فهم تأثير هذه الأدوات على نتائج الطلاب أكثر أهمية.

الطرق

في هذه الدراسة، تضمنت الطرق المستخدمة للتحقيق في العلاقات بين سلوكيات التعلم ونتائج الكتابة ضمن مجموعة تجريبية (n = 30) حساب معاملات الارتباط لبيرسون (r). ركز التحليل على تكرار سلوكيات استخدام Grammarly المحددة، بما في ذلك ميزات الذكاء الاصطناعي التوليدية المحدودة وميزات تصحيح القواعد/المفردات، وعلاقتها بإجمالي درجات اختبار ما بعد. تم تحديد علاقات إيجابية ملحوظة، لا سيما بين الدرجة الإجمالية وتكرار استخدام ميزات الذكاء الاصطناعي التوليدية المحدودة (الممارسة: $r = 0.346$, $p = 0.049$؛ الواجب: $r = 0.373$, $p = 0.032$)، بالإضافة إلى ميزات تصحيح القواعد/المفردات (الممارسة: $r = 0.374$, $p = 0.032$؛ الواجب: $r = 0.348$, $p = 0.047$)، وإجمالي عدد المراجعات (الممارسة: $r = 0.359$, $p = 0.040$؛ الواجب: $r = 0.375$, $p = 0.032$).

كشفت التحليلات الإضافية أن استخدام ميزات الذكاء الاصطناعي التوليدية المحدودة ارتبط بشكل كبير بنتائج مكونات الكتابة، بما في ذلك المحتوى والتنظيم، بينما كانت ميزات القواعد والمفردات مرتبطة بشكل خاص بنتائج مكونات القواعد والمفردات. بالإضافة إلى ذلك، وُجدت علاقة إيجابية بين تكرار استخدام ميزات الذكاء الاصطناعي التوليدية المحدودة وإجمالي عدد المراجعات، مما يشير إلى أن الاستخدام المتزايد كان مرتبطًا بمعدلات مراجعة أعلى خلال كل من أنشطة الممارسة ($r = 0.421$, $p = 0.012$) والواجبات ($r = 0.398$, $p = 0.018$). تؤكد النتائج على تأثير سلوكيات التعلم المحددة على أداء الكتابة، كما يتضح من الأهمية الإحصائية للنتائج.

النتائج

يقدم قسم النتائج في الدراسة تحليلًا شاملاً لتأثير التغذية الراجعة المدعومة بالذكاء الاصطناعي على كفاءة الكتابة وتجارب الطلاب. أكدت التحليلات الكمية الأولية قابلية المقارنة الأساسية بين المجموعتين الضابطة والتجريبية، تلتها مقارنات لأداء اختبار ما بعد. استكشفت تحليلات الارتباط والانحدار العلاقة بين سلوكيات التعلم والنتائج ضمن المجموعة التجريبية. كشفت الرؤى النوعية من المقابلات شبه المنظمة مع 25 مشاركًا عن ثلاثة مواضيع رئيسية تتعلق بتجاربهم مع Grammarly Premium: زيادة الكفاءة والثقة في عملية الكتابة، تحسينات ملحوظة في الدقة والوعي اللغوي، وضرورة التفاعل النقدي والرغبة في دعم لغوي أوسع.

أفاد المشاركون أن Grammarly حسنت بشكل كبير من كفاءة مراجعتهم وزادت من ثقتهم في الكتابة، مما سمح لهم بالتركيز أكثر على المحتوى بدلاً من الأخطاء السطحية. لاحظ العديد منهم تحسينات في الدقة النحوية والوضوح، حيث كانت الأداة تعمل كمدقق لغوي وكمورد تعليمي. ومع ذلك، أكد المشاركون أيضًا على أهمية التفاعل النقدي مع اقتراحات الأداة، محذرين من الاعتماد المفرط معبرين عن رغبتهم في دعم أوسع لتحقيق نغمة وأسلوب طبيعي، خاصة لمتعلمي اللغة الإنجليزية كلغة أجنبية (EFL). يوفر دمج النتائج الكمية والنوعية فهمًا دقيقًا لتأثيرات التغذية الراجعة المدعومة بالذكاء الاصطناعي على كتابة EFL، كما هو ملخص في الجداول المرفقة.

المناقشة

في قسم المناقشة من ورقة البحث، يحدد المؤلفون عدة فرضيات بشأن تأثير التغذية الراجعة المدعومة بالذكاء الاصطناعي على كفاءة الكتابة لدى الطلاب مقارنة بتغذية المعلم التقليدية. يفترضون أن الطلاب الذين يتلقون تغذية راجعة من الذكاء الاصطناعي سيحققون درجات كتابة أعلى بشكل عام، ويظهرون مراجعات أكثر تكرارًا، ويظهرون تحسنًا أكبر في استخدام اللغة، خاصة في التماسك والميكانيكا. تسلط مراجعة الأدبيات الضوء على التكامل المتزايد لأدوات الذكاء الاصطناعي في تعليم اللغة الإنجليزية كلغة أجنبية (EFL)، مما يبرز قدرتها على تقديم تغذية راجعة فورية وشخصية قد تعزز من مشاركة الطلاب واستقلاليتهم. ومع ذلك، يشير المؤلفون إلى وجود فجوات كبيرة في الأبحاث الحالية، خاصة نقص الدراسات المقارنة المباشرة بين الذكاء الاصطناعي والتغذية الراجعة التقليدية، والحاجة إلى تحقيقات تجريبية حول فعالية أدوات الذكاء الاصطناعي في تعزيز مهارات الكتابة العليا.

يناقش المؤلفون أيضًا الأطر النظرية ذات الصلة بفهم آليات التغذية الراجعة، وتحديدًا النظرية الاجتماعية الثقافية (SCT) ونظرية الحمل المعرفي (CLT). تقترح SCT أن تغذية الذكاء الاصطناعي وتغذية المعلم تتوسط التعلم بشكل مختلف، حيث تكون تغذية المعلم أكثر اجتماعية وحوارية، بينما تكون تغذية الذكاء الاصطناعي خوارزمية. تفترض CLT أن التغذية الراجعة الفورية من الذكاء الاصطناعي قد تغمر الطلاب بتصحيحات سطحية، مما قد يشتت انتباههم عن التركيز على القضايا الكتابية العليا. يجادل المؤلفون بضرورة إجراء دراسات تجريبية تقارن مباشرة بين التغذية الراجعة المدعومة بالذكاء الاصطناعي وتغذية المعلم التقليدية في سياقات EFL الحقيقية، بهدف معالجة الفجوات المحددة وإبلاغ الممارسات التربوية بشأن دمج التكنولوجيا في تعليم الكتابة.

القيود

تقدم الدراسة عدة قيود تؤثر على تفسير نتائجها. أولاً، تنبع القيود السياقية من العينة المحددة من طلاب الدراسات العليا المصريين والاستخدام الحصري لأداة الذكاء الاصطناعي Grammarly Premium، مما قد يعيق تعميم النتائج على مجموعات سكانية أوسع أو أدوات ذكاء اصطناعي مختلفة. ثانيًا، تبرز القيود الزمنية من خلال المدة القصيرة للتدخل، التي استمرت فقط ستة أسابيع، مما يشير إلى الحاجة إلى أبحاث طولية لتقييم الآثار طويلة المدى للتدخل.

بالإضافة إلى ذلك، تم الإشارة إلى القيود المنهجية، بما في ذلك الاعتماد على مقاييس ذاتية ويدوية للاستخدام والمراجعة، مما قد يقدم تباينًا وتحاملًا. هناك أيضًا تحيز محتمل من المعلم-الباحث قد يؤثر على النتائج. أخيرًا، تقدم أوقات تسليم التغذية الراجعة المختلفة بين الظروف تعقيدًا داخليًا يعقد تفسير النتائج. تشير هذه القيود إلى أن مزيدًا من البحث ضروري للتحقق من النتائج وتوسيع نطاقها.

Journal: Discover Education, Volume: 4, Issue: 1
DOI: https://doi.org/10.1007/s44217-025-00602-7
Publication Date: 2025-06-12
Author(s): Mohamed Mekheimer
Primary Topic: Intelligent Tutoring Systems and Adaptive Learning

Overview

This study examined the effects of generative AI-assisted writing feedback, specifically through the use of Grammarly, on the writing proficiency, revision practices, and overall writing quality of English as a Foreign Language (EFL) learners. A total of sixty postgraduate EFL students were divided into an experimental group utilizing Grammarly and a control group receiving traditional instruction. The results indicated that the experimental group demonstrated significantly higher post-test scores in writing proficiency. Furthermore, there were positive correlations between the use of AI features—such as grammar and vocabulary tools—and increased revision frequency, alongside improvements in content organization and cohesion. Qualitative data from semi-structured interviews revealed that AI-assisted feedback enhanced student engagement by reducing frustration and increasing confidence, while also highlighting the importance of integrating AI tools with traditional pedagogical methods to foster critical thinking.

In conclusion, the study provided empirical evidence that AI-assisted writing feedback, particularly from Grammarly Premium, significantly improved EFL students’ writing proficiency, especially in Language Use and Organization, although no notable gains were found in Content. Students reported enhanced confidence and efficiency in their revision processes, aligning with the quantitative findings. However, they also stressed the need for critical engagement with AI suggestions and acknowledged the limitations of such tools in supporting natural language fluency. The findings suggest that while AI feedback tools can effectively address surface-level writing issues, they should not replace comprehensive writing development strategies. Educators are encouraged to teach students how to critically assess AI feedback, ensuring that these tools are used to complement traditional instruction rather than serve as a sole resource.

Introduction

The integration of artificial intelligence (AI) into education is advancing swiftly, particularly in the realm of language learning, where it shows considerable promise for enhancing writing skills. Notably, AI-driven tools that offer automated writing feedback, such as grammar and style checkers, have gained popularity among students. This study specifically examines the use of Grammarly, an AI-enhanced writing assistant, to explore its effectiveness in supporting students’ writing development.

The widespread availability of these AI applications underscores their potential to transform educational practices, providing learners with immediate, personalized feedback that can improve their writing proficiency. As the landscape of educational technology continues to evolve, understanding the impact of such tools on student outcomes becomes increasingly important.

Methods

In this study, the methods employed to investigate the correlations between learning behaviors and writing outcomes within an experimental group (n = 30) involved calculating Pearson correlation coefficients (r). The analysis focused on the frequency of specific Grammarly usage behaviors, including limited generative AI features and grammar/vocabulary corrective features, and their relationship with total post-test scores. Significant positive correlations were identified, notably between the total score and the frequency of using limited generative AI features (practice: $r = 0.346$, $p = 0.049$; assignment: $r = 0.373$, $p = 0.032$), as well as grammar/vocabulary corrective features (practice: $r = 0.374$, $p = 0.032$; assignment: $r = 0.348$, $p = 0.047$), and the total number of revisions (practice: $r = 0.359$, $p = 0.040$; assignment: $r = 0.375$, $p = 0.032$).

Further analysis revealed that the use of limited generative AI features correlated significantly with writing component scores, including Content and Organization, while grammar and vocabulary features were specifically linked to the Grammar and Vocabulary component scores. Additionally, a positive correlation was found between the frequency of using limited generative AI features and the total number of revisions, indicating that increased usage was associated with higher revision rates during both practice ($r = 0.421$, $p = 0.012$) and assignment activities ($r = 0.398$, $p = 0.018$). The results underscore the impact of specific learning behaviors on writing performance, as evidenced by the statistical significance of the findings.

Results

The results section of the study presents a comprehensive analysis of the impact of AI-assisted feedback on writing proficiency and student experiences. Initial quantitative analyses confirmed baseline comparability between control and experimental groups, followed by comparisons of post-test performance. Correlational and regression analyses further explored the relationship between learning behaviors and outcomes within the experimental group. Qualitative insights from semi-structured interviews with 25 participants revealed three main themes regarding their experiences with Grammarly Premium: Enhanced Efficiency and Confidence in the Writing Process, Perceived Improvements in Accuracy and Language Awareness, and the Necessity of Critical Engagement and Desire for Broader Language Support.

Participants reported that Grammarly significantly improved their revision efficiency and boosted their writing confidence, allowing them to focus more on content rather than surface-level errors. Many noted improvements in grammatical accuracy and clarity, with the tool serving as both a proofreader and a learning resource. However, participants also emphasized the importance of critical engagement with the tool’s suggestions, cautioning against over-reliance and expressing a desire for broader support in achieving natural tone and style, particularly for English as a Foreign Language (EFL) learners. The integration of quantitative and qualitative findings provides a nuanced understanding of the effects of AI-assisted feedback on EFL writing, as summarized in the accompanying tables.

Discussion

In the discussion section of the research paper, the authors outline several hypotheses regarding the impact of AI-assisted writing feedback on students’ writing proficiency compared to traditional teacher feedback. They hypothesize that students receiving AI feedback will achieve higher overall writing scores, exhibit more frequent revisions, and show greater improvement in language use, particularly in cohesion and mechanics. The literature review highlights the growing integration of AI tools in English as a Foreign Language (EFL) instruction, emphasizing their potential to provide immediate, personalized feedback that may enhance student engagement and autonomy. However, the authors note significant gaps in existing research, particularly the lack of direct comparative studies between AI and traditional feedback, and the need for empirical investigations into the effectiveness of AI tools in promoting higher-order writing skills.

The authors also discuss theoretical frameworks relevant to understanding feedback mechanisms, specifically Sociocultural Theory (SCT) and Cognitive Load Theory (CLT). SCT suggests that AI and teacher feedback mediate learning differently, with teacher feedback being more social and dialogic, while AI feedback is algorithmic. CLT posits that immediate AI feedback may overwhelm students with surface-level corrections, potentially detracting from their focus on higher-order writing concerns. The authors argue for the necessity of empirical studies that directly compare AI-assisted feedback with traditional teacher feedback in authentic EFL contexts, aiming to address the identified gaps and inform pedagogical practices regarding technology integration in writing instruction.

Limitations

The study presents several limitations that affect the interpretation of its findings. Firstly, the contextual limitations stem from the specific sample of Egyptian postgraduates and the exclusive use of the AI tool Grammarly Premium, which may hinder the generalizability of the results to broader populations or different AI tools. Secondly, the temporal limitations are highlighted by the short duration of the intervention, lasting only six weeks, indicating a need for longitudinal research to assess the long-term effects of the intervention.

Additionally, methodological limitations are noted, including the reliance on subjective and manual metrics for usage and revision, which may introduce variability and bias. There is also a potential instructor-researcher bias that could influence the outcomes. Lastly, the differing feedback delivery times between conditions present an intrinsic confound that complicates the interpretation of the results. These limitations suggest that further research is necessary to validate and expand upon the findings of this study.