سرد الإبداع: الترجمة البشرية مقابل الترجمة الآلية بعد التحرير في تدريب الترجمة النصية Narrating Creativity: Human Translation vs. Machine Translation Post-Editing in Subtitling Training

شارك:
المجلة: Journal of Narrative and Language Studies
DOI: https://doi.org/10.59045/nalans.2026.108
تاريخ النشر: 2026-06-27
المؤلف: Beyza Havvanur Sarımehmet وآخرون
الموضوع الرئيسي: دراسات وممارسات الترجمة

نظرة عامة

تدرس هذه الدراسة تأثير تدريب تحرير الترجمة الآلية (MTPE) على إبداع طلاب السنة الرابعة في الترجمة والتفسير، وبشكل خاص في الترجمة النصية، مقارنة بممارسات الترجمة البشرية التقليدية (HT). باستخدام تصميم تجريبي قبل/بعد الاختبار، قيست الإبداع من خلال الدقة والجدة، مع تحليل التغيرات في الأداء بعد التدخل. أظهرت النتائج عدم وجود اختلافات كبيرة في درجات الإبداع العامة بين مجموعتي HT وMTPE. ومع ذلك، أظهرت مجموعة HT تحولات إبداعية أكبر، بينما أظهرت مجموعة MTPE أخطاء أقل. نسبت تحليلات ANCOVA هذه الاختلافات إلى تباينات خط الأساس الموجودة مسبقًا بدلاً من وضع التدريب. أظهرت كلا المجموعتين تحسينات كبيرة في القبول بعد التدريب، مع أحجام تأثير كبيرة، وحققت مجموعة HT تحسينًا ذا دلالة إحصائية في درجات الإبداع العامة.

تشير النتائج إلى أنه بينما تعمل كل من أوضاع التدريب HT وMTPE على تحسين القبول بشكل فعال، فإن تدريب HT يعزز أيضًا الأداء الإبداعي العام. ومن الجدير بالذكر أن مجموعة MTPE أظهرت تباينًا أكبر في الأداء، مما يشير إلى تأثير العوامل الفردية، مثل سمات الشخصية، على نتائج التحرير. تسهم هذه الدراسة في الأدبيات المحدودة حول الإبداع في الترجمة النصية التركية وتدعو إلى نموذج تدريب متكامل يستفيد من نقاط القوة في كلا النهجين. تؤكد الدراسة على أهمية اعتبار هذه الأوضاع كأدوات تربوية تكمل بعضها البعض وتعزز أبعادًا مختلفة من الإبداع، بدلاً من رؤيتها كأشياء متعارضة. يضيف التصميم التجريبي المنضبط قوة إلى النتائج، على الرغم من أن حجم العينة الصغيرة (N = 23) قد يحد من إمكانية تعميم النتائج.

مقدمة

تسلط مقدمة ورقة البحث الضوء على التأثير الكبير للتقدم في الذكاء الاصطناعي، وخاصة الترجمة الآلية العصبية (NMT)، على دراسات الترجمة وتدريب المترجمين. تؤكد على تزايد الأدبيات التي تفحص كفاية NMT، خاصة في سياق التحرير، الذي أصبح نقطة محورية لفهم الدور المتطور للمترجمين. تشير الفقرة إلى أنه على الرغم من وجود أبحاث كبيرة حول تحرير الترجمة الآلية (MTPE) بشكل عام، إلا أن تطبيقها في الترجمة السمعية البصرية (AVT)، وخاصة الترجمة النصية، لا يزال غير مستكشف بشكل كافٍ. تهدف الدراسة إلى التحقيق في تأثيرات تدريب MTPE على إبداع المترجمين المتدربين، وخاصة في ترجمة المسلسلات الكوميدية، التي تتطلب تحولات إبداعية دقيقة بسبب فكاهتها المحملة ثقافيًا.

تناقش المقدمة أيضًا التحديات التي تطرحها الترجمة الآلية في الحفاظ على الفروق الأسلوبية والثقافية، التي تعتبر حاسمة في النصوص التعبيرية. تستشهد بعدة دراسات تشير إلى أن الترجمة البشرية تميل إلى إظهار إبداع أعلى مقارنة بـ MTPE، مما يثير تساؤلات حول تأثير تدريب MTPE على تطوير استراتيجيات الإبداع بين المترجمين المتدربين. تهدف الأبحاث إلى معالجة الفجوة في مناهج الترجمة بشأن دمج MTPE كمهارة تقنية وأداة تربوية، ساعية في النهاية إلى إبلاغ مصممي المناهج حول كيفية تحقيق التوازن بين الكفاءة التكنولوجية وزراعة الإبداع في المترجمين المستقبليين. السؤال البحثي المركزي المطروح هو: “ما هو تأثير تدريب MTPE على إبداع المترجمين المتدربين في الترجمة النصية، مقارنة بممارسة الترجمة البشرية؟”

الطرق

تستخدم الدراسة تصميمًا شبه تجريبي قبل/بعد الاختبار للتحقيق في تأثير حالتي تدريب – الترجمة البشرية (HT) وتحرير الترجمة الآلية (MTPE) – على الإبداع في الترجمة النصية بين طلاب السنة الرابعة في دراسات الترجمة في جامعة جانكايا. أجريت الدراسة في بيئة مختبرية محكمة، وشملت 23 مشاركًا تم تعيينهم عشوائيًا إما إلى مجموعة HT (10 طلاب) أو مجموعة MTPE (13 طالبًا). شارك المشاركون في مهام الترجمة النصية على مدار دورة مدتها 14 أسبوعًا، culminating in pre-tests and post-tests that assessed their creativity through specific metrics. استخدم الاختبار السابق مشاهد من المسلسلات الكوميدية “Modern Family” و”Friends”، بينما تميز الاختبار اللاحق بمشاهد مماثلة لضمان الاتساق في التعقيد والمتطلبات المتعلقة بالنوع.

تم تقييم الإبداع بناءً على بعدين رئيسيين: الجدة والقبول. تم قياس الجدة باستخدام وحدات ذات إمكانات إبداعية (UCPs) وتحولات إبداعية، كما تم تعريفها من خلال الأبحاث السابقة. يمكن ترجمة UCPs من خلال إعادة الإنتاج، أو حذفها، أو تحويلها بشكل إبداعي، حيث يتضمن الأخير انحرافات عن النص المصدر من أجل تعزيز الفعالية. تم تقييم القبول باستخدام نسخة معدلة من مقياس الجودة متعدد الوسائط (MQM). يسمح هذا الإطار المنهجي بفحص منهجي لخيارات الترجمة، مما يوفر نهجًا قابلًا للتكرار للدراسات المستقبلية في أبحاث الترجمة السمعية البصرية، على الرغم من التحديات الكامنة في قياس الإبداع بشكل موضوعي.

النتائج

تشير نتائج الدراسة إلى أن مجموعة البيانات متاحة للجمهور، وتم إجراء المقارنة بين الترجمة البشرية (HT) وتحرير الترجمة الآلية (MTPE) عبر ثلاثة مقاييس: درجات الإبداع، التحولات الإبداعية، ونقاط الأخطاء، قبل وبعد التدريب. أظهرت نتائج الاختبار السابق أن المشاركين في مجموعة HT حققوا درجات إبداع أعلى (المتوسط = 19.8) مقارنة بـ MTPE (المتوسط = 14.4)، على الرغم من أن هذا الاختلاف لم يكن ذا دلالة إحصائية (p = 0.065). من حيث التحولات الإبداعية، تفوقت مجموعة HT أيضًا على MTPE (المتوسط = 12.9 مقابل 9.4)، مع وجود فرق كبير (p = 0.0038). كانت نقاط الأخطاء أعلى لمجموعة HT (المتوسط = 69.1) مقارنة بـ MTPE (المتوسط = 52.31)، لكن هذا الاختلاف لم يكن ذا دلالة (p = 0.2029). بعد التدريب، حافظت مجموعة HT على درجات إبداع أعلى (27.2 مقابل 19.3) وتحولات إبداعية (10.1 مقابل 7.46)، مع إظهار الأخيرة دلالة (p = 0.0489). ومع ذلك، أشارت تحليلات ANCOVA إلى أن هذه الاختلافات كانت تعود إلى حد كبير إلى التباينات الأساسية الموجودة مسبقًا بدلاً من وضع التدريب نفسه.

أظهر التحليل الإضافي أن كلا المجموعتين تحسنتا في القبول، كما يتضح من الانخفاضات الكبيرة في نقاط الأخطاء (HT: W = 50، p = 0.020؛ MTPE: W = 77، p = 0.027)، بينما لوحظت اتجاهات نحو زيادة التحولات الإبداعية ولكنها لم تكن ذات دلالة إحصائية. ومن الجدير بالذكر أن مجموعة HT أظهرت تحسنًا كبيرًا في درجات الإبداع العامة (W = 6، p = 0.027)، بينما أظهرت MTPE اتجاهًا غير ذي دلالة (W = 21، p = 0.094). بشكل عام، على الرغم من عدم العثور على اختلافات كبيرة بين وضعي التدريب من حيث حجم التغيير، إلا أن كلاهما كان فعالًا في تعزيز القبول، مع تعزيز تدريب HT أيضًا للتحسينات في الأداء الإبداعي.

المناقشة

في هذا القسم، تركز المناقشة على تقييم الإبداع في الترجمة النصية من خلال نهجين تعليميين: الترجمة البشرية (HT) وتحرير الترجمة الآلية (MTPE). استخدمت الدراسة مقياس جودة متعدد الوسائط معدلاً يركز على السمات اللغوية والوظيفية الأوسع التي تؤثر على استقبال المشاهدين، بما في ذلك الدقة السياقية والتوقيت، مع تقليل التركيز على القواعد الإملائية. تشير النتائج إلى أنه بينما تحسنت كلا المجموعتين من حيث القبول بعد التدريب، أظهرت مجموعة HT تحولات إبداعية أكبر لكنها أيضًا تكبدت درجات أخطاء أعلى، على الرغم من أن هذه الاختلافات لم تكن ذات دلالة إحصائية. أظهرت مجموعة MTPE، بينما أنتجت أخطاء أقل، إبداعًا أقل.

كشف التحليل أن مجموعة MTPE أظهرت تباينًا أكبر في الأداء، مما يشير إلى أن العوامل الفردية قد تؤثر على نتائج التحرير. على الرغم من عدم وجود اختلافات كبيرة في درجات الإبداع العامة بين المجموعتين، تبرز الدراسة الطبيعة التكميلية لكل من HT وMTPE في تعزيز جوانب مختلفة من الإبداع. تعتبر هذه الأبحاث ذات أهمية خاصة لأنها تتناول الإبداع في الترجمة النصية باللغة التركية، مقترحة نموذج تدريب متكامل يستفيد من كلا وضعي الترجمة لتعزيز التجربة التعليمية للمترجمين المتدربين. يعزز التصميم التجريبي المنضبط موثوقية النتائج، على الرغم من أن حجم العينة الصغيرة قد يحد من إمكانية تعميم النتائج.

Journal: Journal of Narrative and Language Studies
DOI: https://doi.org/10.59045/nalans.2026.108
Publication Date: 2026-06-27
Author(s): Beyza Havvanur Sarımehmet et al.
Primary Topic: Translation Studies and Practices

Overview

This study examines the impact of machine translation post-editing (MTPE) training on the creativity of fourth-year Translation and Interpreting students, specifically in subtitling, compared to traditional human translation (HT) practices. Utilizing a pre-test/post-test experimental design, the research measured creativity through accuracy and novelty, analyzing performance changes post-intervention. The results indicated no significant differences in overall Creativity Scores between the HT and MTPE groups. However, the HT group exhibited more Creative Shifts, while the MTPE group demonstrated fewer errors. ANCOVA analyses attributed these differences to pre-existing baseline variances rather than the training mode. Both groups showed significant improvements in acceptability post-training, with large effect sizes, and the HT group achieved a statistically significant enhancement in overall Creativity Scores.

The findings suggest that while both HT and MTPE training modes effectively improve acceptability, HT training further fosters overall creative performance. Notably, the MTPE group displayed greater variability in performance, hinting at the influence of individual factors, such as personality traits, on post-editing outcomes. This research contributes to the limited literature on creativity in Turkish subtitling and advocates for an integrated training model that leverages the strengths of both approaches. The study underscores the importance of considering these modes as complementary pedagogical tools that enhance different dimensions of creativity, rather than viewing them as mutually exclusive. The controlled experimental design adds robustness to the findings, although the small sample size (N = 23) may limit generalizability.

Introduction

The introduction of the research paper highlights the significant impact of advancements in artificial intelligence, particularly Neural Machine Translation (NMT), on translation studies and translator training. It emphasizes the growing body of literature examining the adequacy of NMT, especially in the context of post-editing, which has become a focal point for understanding the evolving role of translators. The section notes that while there has been considerable research on machine translation post-editing (MTPE) in general, its application in audiovisual translation (AVT), particularly subtitling, remains underexplored. The study aims to investigate the effects of MTPE training on the creativity of trainee translators, particularly in subtitling sitcoms, which require nuanced creative shifts due to their culturally loaded humor.

The introduction further discusses the challenges posed by machine translation in preserving stylistic and cultural nuances, which are crucial in expressive texts. It cites various studies indicating that human translation tends to exhibit higher creativity compared to MTPE, raising questions about the impact of MTPE training on the development of creative strategies among trainee translators. The research aims to address the gap in translation curricula regarding the integration of MTPE as both a technical skill and a pedagogical tool, ultimately seeking to inform curriculum designers on how to balance technological competence with the cultivation of creativity in future translators. The central research question posed is: “What is the effect of MTPE training on the creativity of trainee translators in subtitling, compared to human translation practice?”

Methods

The study employs a quasi-experimental pre-test/post-test design to investigate the impact of two training conditions—Human Translation (HT) and Machine Translation Post-Editing (MTPE)—on creativity in subtitling among fourth-year Translation Studies students at Çankaya University. Conducted in a controlled laboratory setting, the research involved 23 participants who were randomly assigned to either the HT group (10 students) or the MTPE group (13 students). The participants engaged in subtitling tasks over a 14-week course, culminating in pre-tests and post-tests that assessed their creativity through specific metrics. The pre-test utilized scenes from the sitcoms “Modern Family” and “Friends,” while the post-test featured similar scenes to ensure consistency in complexity and genre-related demands.

Creativity was evaluated based on two primary dimensions: novelty and acceptability. Novelty was measured using Units with Creative Potential (UCPs) and Creative Shifts, as defined by previous research. UCPs can be translated through reproduction, omitted, or creatively shifted, with the latter involving deviations from the source text for enhanced effectiveness. Acceptability was assessed using a modified version of the Multimodal Quality Metric (MQM). This methodological framework allows for a systematic examination of translation choices, providing a replicable approach for future studies in audiovisual translation research, despite the inherent challenges in objectively measuring creativity.

Results

The study’s findings indicate that the dataset is publicly accessible, and the comparison between Human Translation (HT) and Machine Translation Post-Editing (MTPE) was conducted across three measures: Creativity Scores, Creative Shifts, and Error Points, both pre- and post-training. Pre-test results showed HT participants had higher Creativity Scores (mean = 19.8) compared to MTPE (mean = 14.4), although this difference was not statistically significant (p = 0.065). In terms of Creative Shifts, HT participants also outperformed MTPE (mean = 12.9 vs. 9.4), with a significant difference (p = 0.0038). Error Points were higher for HT (mean = 69.1) than MTPE (mean = 52.31), but this difference was not significant (p = 0.2029). Post-training, HT maintained higher Creativity Scores (27.2 vs. 19.3) and Creative Shifts (10.1 vs. 7.46), with the latter showing significance (p = 0.0489). However, ANCOVA analyses indicated that these differences were largely attributable to pre-existing baseline disparities rather than the training mode itself.

Further analysis revealed that both groups improved in acceptability, as evidenced by significant reductions in Error Points (HT: W = 50, p = 0.020; MTPE: W = 77, p = 0.027), while trends toward increased Creative Shifts were noted but not statistically significant. Notably, the HT group exhibited a significant improvement in overall Creativity Scores (W = 6, p = 0.027), whereas MTPE showed a non-significant trend (W = 21, p = 0.094). Overall, while no significant differences were found between the two training modes in terms of the magnitude of change, both were effective in enhancing acceptability, with HT training additionally fostering improvements in creative performance.

Discussion

In this section, the discussion focuses on the evaluation of creativity in subtitling through two instructional approaches: human translation (HT) and machine translation post-editing (MTPE). The study utilized a modified multimodal quality metric that emphasizes broader linguistic and functional traits affecting viewer reception, including contextual accuracy and timing, while downplaying grammar and spelling. The findings indicate that while both groups improved in terms of acceptability post-training, the HT group exhibited more Creative Shifts but also incurred higher error scores, although these differences were not statistically significant. The MTPE group, while producing fewer errors, showed less creativity.

The analysis revealed that the MTPE group displayed greater variability in performance, suggesting that individual factors may influence post-editing outcomes. Despite the lack of significant differences in overall Creativity Scores between the groups, the study highlights the complementary nature of HT and MTPE in fostering different aspects of creativity. This research is particularly significant as it addresses creativity in subtitling within the Turkish language, proposing an integrated training model that leverages both translation modes to enhance the educational experience for trainee translators. The controlled experimental design strengthens the reliability of the findings, although the small sample size may limit generalizability.