DOI: https://doi.org/10.26034/cm.jostrans.2024.4724
تاريخ النشر: 2024-01-25
المؤلف: Ana Guerberof Arenas وآخرون
الموضوع الرئيسي: الثقافة الإسبانية والهوية
نظرة عامة
تبحث هذه الورقة البحثية في استقبال الترجمة السمعية البصرية (AVT) من خلال ثلاثة تجارب تشمل أكثر من 200 مشارك يتحدثون الإنجليزية الذين شاهدوا مقطعًا مدته 20 دقيقة من مسلسل مكسيكي. تم عرض المشاركين لترجمات نصية تم إنتاجها من خلال ثلاث طرق ترجمة مختلفة: الترجمة البشرية (HT)، التحرير اللاحق (PE)، والترجمة الآلية (MT). كانت الدراسة تهدف إلى تقييم الانخراط السردي، المتعة، واستقبال الترجمة. تشير النتائج إلى أن المشاهدين أظهروا انخراطًا أعلى مع PE مقارنة بـ HT، مع ظهور اختلافات كبيرة بشكل أساسي بين PE و MT. كانت مستويات المتعة أقل بشكل ملحوظ بالنسبة لـ MT، وأبرزت درجات استقبال الترجمة المزيد من أوجه القصور في MT مقارنةً بكل من PE و HT. تشير درجات معدل تحرير الترجمة البشرية العالية (HTER) إلى أن تحريرًا كبيرًا مطلوب لجعل ترجمات MT قابلة للنشر، مما يثير تساؤلات حول جدوى MT في سير العمل الخاصة بالترجمة النصية دون وقت كافٍ وتعويض للمحررين اللاحقين.
تخلص الدراسة إلى أنه بينما يمكن أن يكون PE خيارًا قابلاً للتطبيق للترجمة النصية، خاصةً لنوع اللغة الزوجية المحدد الذي تم فحصه، فإن الحاجة إلى تعديلات واسعة على ترجمات MT تؤكد على أهمية التعويض العادل عن العمل التحريري اللاحق. يؤكد المؤلفون على ضرورة الشفافية في ممارسات الترجمة النصية التي تشمل MT ويدعون إلى نهج تشاركي في تنفيذ الأتمتة الجزئية في الترجمة. يعترفون بحدود نتائجهم، التي تقتصر على الزوج اللغوي ES-MX إلى EN-UK ونوع الدراما، ويقترحون أن البحث المستقبلي يجب أن يستكشف جهد المترجم عبر طرق وأنواع مختلفة للحصول على فهم أكثر شمولاً لاستقبال AVT.
مقدمة
تناقش مقدمة الورقة البحثية المخاوف المتزايدة المحيطة باستخدام الترجمة الآلية (MT) في صناعة الترجمة النصية، خاصةً في ضوء نجاح السلاسل المترجمة مثل *Squid Games* و *Money Heist*. تواجه الصناعة “نقصًا في المواهب”، حيث يغادر العديد من المترجمين بسبب انخفاض التعويض وممارسات العمل التقييدية، على الرغم من ادعاءات الشركات بأن الأجر ليس القضية الرئيسية. تشير الاستطلاعات إلى أن تحسين الأسعار يمكن أن يخفف من نقص المحترفين. وقد دعت جمعيات مختلفة، بما في ذلك الاتحاد الأوروبي لمترجمي السمعيات البصرية، إلى أفضل الممارسات في استخدام MT وأكدت على أهمية المترجمين البشر على التحرير اللاحق لـ MT.
تهدف الورقة إلى معالجة فجوة في الأبحاث الحالية من خلال فحص تأثير طرق الترجمة النصية المختلفة – الترجمة البشرية (HT)، التحرير اللاحق (PE)، والترجمة الآلية (MT) – على استقبال المشاهدين. باستخدام منهجية تم تطبيقها سابقًا على الترجمة الأدبية، أجرى المؤلفون ثلاث تجارب لتقييم الانخراط السردي، المتعة، واستقبال الترجمة بين أكثر من 200 مشارك يتحدثون الإنجليزية باستخدام مقاطع من مسلسل مكسيكي. ستساهم نتائج الدراسة في فهم دور MT في الترجمة السمعية البصرية (AVT) وتقترح اتجاهات البحث المستقبلية.
الطرق
في هذا القسم، يحدد المؤلفون منهجيتهم لفحص تأثير ترجمة العناوين عبر طرق مختلفة، مع التركيز بشكل خاص على الانخراط السردي، المتعة، الفهم، والاستقبال العام. تستخدم الدراسة مقطعًا مدته 19′ 26″ من الحلقة 55 من المسلسل المكسيكي *Te doy la vida*، الذي يركز على الديناميات الأسرية داخل ورشة سيارات في المكسيك. تم اختيار هذا المسلسل سابقًا لتحليل مقارن لأنظمة الترجمة النصية، حيث تم تحديد AppTek كخيار متفوق على Google Translate (Santilli 2021).
بالنسبة للبحث الحالي، تم الحصول على المقطع من AppTek، التي قدمت أيضًا مخرجات الترجمة الآلية من الإسبانية اللاتينية إلى الإنجليزية (MT) التي تم إنشاؤها بواسطة نظامها العصبي المخصص للترجمة السمعية البصرية. تم اتخاذ القرار باستخدام هذا المقطع المحدد من المسلسل بناءً على بيانات سابقة تشير إلى أداء AppTek المحسن في الترجمة النصية، مما يسمح بتقييم أكثر أصالة لفعالية ترجمة العناوين في سياق العالم الحقيقي.
المناقشة
تسلط قسم المناقشة في الورقة البحثية الضوء على تطور دراسات استقبال الترجمة السمعية البصرية (AVT)، مع التأكيد على أهمية انخراط المشاهدين والمنهجيات المستخدمة لتقييم قراءة العناوين. أظهرت دراسات تتبع العين أن المشاهدين عمومًا متسامحون مع تداخل العناوين مع تغييرات اللقطات، على الرغم من أنهم يعبرون عن تفضيل واضح للعناوين المجزأة نحويًا. تتطلب الزيادة في دمج الترجمة الآلية (MT) في إنتاج العناوين تحليلًا مقارنًا لاستجابات المشاهدين تجاه العناوين المترجمة آليًا، والتحرير اللاحق (PE)، والترجمة البشرية (HT). أشارت الدراسات السابقة إلى عدم وجود اختلافات كبيرة في فهم المشاهدين ومواقفهم بين العناوين HT و PE، بينما كانت العناوين PE مفضلة على MT من حيث مقاييس الاستقبال.
توضح الورقة أيضًا تحسينات المنهجية التي تم إجراؤها من خلال دراسات تجريبية، والتي شملت تعديلات على تحديد العناوين واستخدام معدل تحرير الترجمة المستهدف للبشر (HTER) لتقييم جودة العناوين MT. كشفت النتائج عن عدد كبير من التعديلات المطلوبة لعناوين MT للوصول إلى جودة قابلة للنشر، مما يشير إلى آثار محتملة على التعويض في الإعدادات المهنية. أظهرت نتائج التجربة الرئيسية، التي شملت مجموعة أكبر من المشاركين، أن العناوين PE حققت انخراطًا سرديًا أعلى واستقبالًا للترجمة مقارنةً بالعناوين MT، على الرغم من عدم العثور على اختلافات كبيرة بين HT و PE. بشكل عام، تؤكد الدراسة على الدور الحاسم لجودة العناوين وتفضيلات المشاهدين في سياق AVT، خاصةً مع تزايد استخدام الترجمة الآلية في الصناعة.
DOI: https://doi.org/10.26034/cm.jostrans.2024.4724
Publication Date: 2024-01-25
Author(s): Ana Guerberof Arenas et al.
Primary Topic: Spanish Culture and Identity
Overview
This research paper investigates the reception of audiovisual translation (AVT) through three experiments involving over 200 English-speaking participants who viewed a 20-minute clip from a Mexican telenovela. The participants were exposed to subtitles produced through three different translation modalities: human translation (HT), post-editing (PE), and machine translation (MT). The study aimed to assess narrative engagement, enjoyment, and translation reception. Findings indicate that viewers exhibited higher engagement with PE compared to HT, with significant differences emerging primarily between PE and MT. Enjoyment levels were notably lower for MT, and translation reception scores further highlighted the deficiencies of MT compared to both PE and HT. The high Human Translation Edit Rate (HTER) scores suggest that substantial editing is required to make MT subtitles publishable, raising questions about the viability of MT in subtitling workflows without adequate time and compensation for post-editors.
The study concludes that while PE can be a viable option for subtitling, especially for the specific genre and language pair examined, the necessity for extensive edits to MT subtitles underscores the importance of fair remuneration for post-editing work. The authors emphasize the need for transparency in subtitling practices involving MT and advocate for participatory approaches in implementing partial automation in translation. They acknowledge the limitations of their findings, which are confined to the ES-MX to EN-UK language pair and the drama genre, and suggest that future research should explore translator effort across various modalities and genres to gain a more comprehensive understanding of AVT reception.
Introduction
The introduction of the research paper discusses the growing concerns surrounding the use of machine translation (MT) in the subtitling industry, particularly in light of the success of translated series like *Squid Games* and *Money Heist*. The industry faces a “talent crunch,” with many translators leaving due to low remuneration and restrictive work practices, despite claims from companies that pay is not the primary issue. Surveys indicate that improved rates could alleviate the shortage of professionals. Various associations, including the European Federation of Audiovisual Translators, have advocated for best practices in MT usage and emphasized the importance of human translators over MT post-editing.
The paper aims to address a gap in existing research by examining the impact of different subtitling modalities—human translation (HT), post-edited (PE), and machine translation (MT)—on viewer reception. Utilizing a methodology previously applied to literary translation, the authors conducted three experiments to assess narrative engagement, enjoyment, and translation reception among over 200 English-speaking participants using clips from a Mexican telenovela. The study’s findings will contribute to understanding the role of MT in audiovisual translation (AVT) and suggest future research directions.
Methods
In this section, the authors outline their methodology for examining the impact of subtitle translation across different modalities, specifically focusing on narrative engagement, enjoyment, comprehensibility, and overall reception. The study utilizes a 19′ 26″ clip from Episode 55 of the Mexican telenovela *Te doy la vida*, which centers on familial dynamics within a car workshop in Mexico. This telenovela was previously selected for a comparative analysis of subtitling systems, where AppTek was identified as the superior option over Google Translate (Santilli 2021).
For the current research, the clip was sourced from AppTek, which also provided the Latin-American Spanish to English machine translation (MT) output generated by their AVT-customized neural system. The decision to utilize this specific telenovela clip was informed by prior data indicating AppTek’s enhanced performance in subtitling, thus allowing for a more authentic assessment of subtitle translation effectiveness in a real-world context.
Discussion
The discussion section of the research paper highlights the evolution of Audiovisual Translation (AVT) reception studies, emphasizing the importance of viewer engagement and the methodologies employed to assess subtitle reading. Eye-tracking studies have revealed that viewers are generally tolerant of subtitle overlaps with shot changes, although they express a clear preference for syntactically segmented subtitles. The increasing integration of machine translation (MT) in subtitle production necessitates a comparative analysis of viewer responses to MT, post-edited (PE), and human-translated (HT) subtitles. Previous studies indicated no significant differences in viewer comprehension and attitudes between HT and PE subtitles, while PE subtitles were favored over MT in terms of reception metrics.
The paper also details the methodology refinements made through pilot studies, which included adjustments to subtitle spotting and the use of the Human-targeted Translation Edit Rate (HTER) to evaluate the quality of MT subtitles. The findings revealed a high number of edits required for MT subtitles to reach publishable quality, indicating potential implications for remuneration in professional settings. The results from the main experiment, which involved a larger participant pool, demonstrated that PE subtitles yielded higher narrative engagement and translation reception compared to MT subtitles, although no significant differences were found between HT and PE. Overall, the study underscores the critical role of subtitle quality and viewer preferences in the context of AVT, particularly as machine translation becomes more prevalent in the industry.