كيف يقرأ اللاعبون من المستوى الأول والثاني الترجمة في ألعاب الفيديو؟ دراسة استكشافية لحركة العين How do L1 and L2 players read subtitles in video games? An exploratory eye-movement study

شارك:
المجلة: Applied Psycholinguistics، المجلد: 47
DOI: https://doi.org/10.1017/s0142716426100940
تاريخ النشر: 2026-01-01
المؤلف: Haiting Lan وآخرون
الموضوع الرئيسي: الترجمة النصية ووسائل الإعلام السمعية البصرية

نظرة عامة

تستكشف هذه الدراسة الاستكشافية كيف يتفاعل اللاعبون من خلفيات لغوية مختلفة مع النصوص في ألعاب الفيديو، مع التركيز على أنماط حركة العين أثناء اللعب. شارك في الدراسة 104 مشاركًا، يتكونون من 56 متحدثًا باللغة الإنجليزية كلغة أولى (L1) و48 متعلمًا للغة الإنجليزية كلغة ثانية (L2)، حيث لعبوا فصلًا تعليميًا من لعبة فيديو تجارية بينما تم تسجيل حركات أعينهم. كشفت النتائج أن لاعبي L2 أظهروا عددًا أكبر من التثبيتات وسرعات سريعة أطول عند مستوى الترجمة مقارنةً بلاعبي L1. بالإضافة إلى ذلك، أظهر لاعبو L2 تأثيرًا أقوى لتكرار الكلمات، مما يدل عليه التثبيتات الأطول على الكلمات ذات التكرار المنخفض خلال كل من المراحل المبكرة والمتأخرة من معالجة اللغة. تشير هذه الأنماط إلى أن لاعبي L2 استخدموا استراتيجية مسح أكثر جهدًا وعمقًا عند معالجة المعلومات النصية.

تساهم الدراسة في فهم القراءة التفاعلية في السياقات الرقمية، مشددة على أن أنماط المسح الأكثر اتساعًا لدى لاعبي L2 قد تنبع من القيود اللغوية. يتماشى هذا مع الأبحاث السابقة التي تشير إلى أن قراء L2 عادةً ما يشاركون في معالجة أكثر استعادة من نظرائهم من L1. تشير النتائج إلى أن جهد المعالجة المعتدل أثناء اللعب يمكن أن يعزز التفاعل مع الترجمة، خاصةً بالنسبة لمتعلمي L2، حيث توفر ألعاب الفيديو بيئات قراءة متعددة الوسائط، وسياقية، وموجهة نحو الأهداف. وهذا يشير إلى أن المهام التي تتطلب جهدًا معرفيًا في الألعاب قد تسهل معالجة اللغة بشكل أعمق وتثبيت المهارات، مما يوفر رؤى قيمة لتصميم التعلم متعدد الوسائط. البيانات ومواد الدراسة الإضافية متاحة عبر مستودع إطار العلوم المفتوحة للمؤلف الأول.

مقدمة

تسلط مقدمة ورقة البحث الضوء على مزايا القراءة المدعومة بوسائط متعددة، خاصة في سياق ألعاب الفيديو، لتعلم اللغة. تشير الدراسات إلى أن القراءة داخل ألعاب الفيديو تعزز التفاعل والدافع لمتعلمي اللغة من خلال دمج القراءة مع حل المشكلات ولعب الألعاب التفاعلية. لا تزيد هذه البيئة من التعرض للغة المستهدفة فحسب، بل تحول أيضًا السياقات غير الرسمية إلى تجارب تعلم مقصودة. تؤكد الورقة على الحاجة إلى مزيد من البحث حول معالجة النصوص أثناء اللعب، خاصةً مقارنةً بأنماط القراءة للغة الأولى (L1) واللغة الثانية (L2)، حيث يمكن أن تساعد فهم هذه الفروق في استراتيجيات التعليم الفعالة للقراءة والفهم في السياقات الرقمية.

يقترح المؤلفون أن قراء L2 يواجهون تحديات فريدة، مثل انخفاض فهم القراءة وسرعة القراءة مقارنةً بقراء L1، مما قد يؤدي إلى استراتيجيات قراءة مختلفة. أظهرت الدراسات السابقة أن قراء L2 يميلون إلى الانخراط في قراءة أكثر جهدًا، تتميز بفترات تثبيت أطول وعدد تثبيتات أعلى. تهدف الدراسة الحالية إلى التحقيق في هذه الفروق في قراءة الترجمة أثناء اللعب باستخدام تقنية تتبع العين، التي تسمح بالتحليل الفوري لسلوك القراءة. تشير النتائج إلى أن لاعبي L2 يظهرون جهدًا أكبر في المعالجة واعتمادًا على الإشارات النصية بسبب القيود المعرفية، خاصةً في بيئة متعددة الوسائط تجمع بين المدخلات البصرية والسمعية واليدوية. تهدف هذه الأبحاث إلى تعميق الفهم لكيفية تأثير الخلفية اللغوية على استراتيجيات القراءة في السياقات التفاعلية، وبالتالي المساهمة في المجال الأوسع للقراءة الرقمية واكتساب اللغة.

الطرق

في هذه الدراسة، يتم استخدام الفصل الأول من لعبة الفيديو *ديترويت: تصبح إنسانًا* (Quantic Dream، 2018) كدراسة حالة لاستكشاف التفاعلات التواصلية في بيئة رقمية. هذا الفصل، بعنوان “الرهن”، يعمل كدليل حيث يتفاعل اللاعب، الذي يجسد الأندرويد كونور، في مفاوضة مع أندرويد منحرف أخذ طفلًا رهينة. تتضمن طريقة اللعب تواصلًا قائمًا على القوائم، مع ترجمات وموسيقى تصويرية متزامنة تعزز التجربة الغامرة. الترجمة محددة زمنياً، مشابهة لتلك الموجودة في مقاطع الفيديو المترجمة، مما يسهل تفاعل اللاعب مع السرد.

لتقييم كفاءة اللغة الثانية (L2) لدى المشاركين، تستخدم الدراسة اختبار المفردات للمتعلمين المتقدمين للغة الإنجليزية (LexTALE) والإصدار الأسترالي من استبيان تجربة اللغة وكفاءتها (LEAP-Q). يتطلب اختبار LexTALE، وهو مهمة التعرف على شكل الكلمة، من المشاركين التمييز بين الكلمات وغير الكلمات، مما يعد مقياسًا موثوقًا لمعرفتهم بالمفردات التي ترتبط بمقاييس كفاءة L2 الأوسع. تتيح هذه الطريقة المنهجية فهمًا دقيقًا لاستخدام اللغة في الوسائط التفاعلية، مما يساهم في مجال علم النفس اللغوي ودراسات الاتصال الرقمي.

النتائج

في الدراسة، واجه المشاركون متوسط 95.63 ترجمة (SD = 7.85)، تتكون من حوالي 608.37 كلمة (SD = 51.87) أثناء اللعب. لضمان صحة بيانات تتبع العين، تم استبعاد فترات التثبيت التي تقل عن 60 مللي ثانية أو تزيد عن 800 مللي ثانية من التحليلات، وفقًا للمنهجيات المعتمدة (Eskenazi، 2024؛ Negi & Mitra، 2020).

كشفت التحليلات عن عدم وجود اختلافات كبيرة في الحمل المعرفي، كما تم قياسه بواسطة NASA-TLX، بين مجموعتي اللغة الأولى (L1) واللغة الثانية (L2)، سواء بشكل عام أو عبر المقاييس الفرعية الفردية (قيمة p ≥ 0.1). تم تقديم إحصائيات وصفية مفصلة لمقاييس حركة العين على مستوى الترجمة والكلمة في الجدول 1، بينما تم تلخيص نتائج تحليلات حركة العين في الجدول 2. من الجدير بالذكر أن قيم p المبلغ عنها في النتائج تم تعديلها باستخدام تصحيح هولم-بونفيروني لتقليل معدل الخطأ العائلي (Von der Malsburg & Angele، 2017).

المناقشة

تسلط قسم المناقشة في ورقة البحث الضوء على الطبيعة الموجهة للمهام لقراءة الترجمات أثناء اللعب، مشددًا على أن اللاعبين يفضلون المعلومات ذات الصلة بأهدافهم الفورية في اللعب. تشير النتائج إلى أن كل من العوامل الداخلية (مثل المهارات والدافع) والعوامل الخارجية (مثل السياق الاجتماعي) تؤثر على كيفية تفسير اللاعبين لأهداف القراءة، مما يؤثر بعد ذلك على سلوكهم في القراءة. من الجدير بالذكر أن اللاعبين ذوي الخبرة يظهرون انتباهًا انتقائيًا للترجمات، حيث يركزون أكثر على النص الذي يوفر معلومات تتعلق بالإجراءات الفورية. تبني الدراسة على هذا الرأي الموجه للمهام لاستكشاف كيفية تخصيص اللاعبين الانتباه للترجمات، كاشفة أن لاعبي L2 يظهرون جهدًا أكبر في المعالجة مقارنةً بلاعبي L1، كما يتضح من عدد التثبيتات الأعلى وسرعات السقوط الأكبر.

علاوة على ذلك، يناقش القسم المعالجة متعددة الوسائط في اللعب، حيث يجب على اللاعبين دمج مدخلات حسية متنوعة، بما في ذلك الترجمات والمرئيات والصوت. يتم تطبيق نظرية الحمل المعرفي لفهم الأنواع المختلفة من الحمل المعرفي الذي يختبره اللاعبون، والذي يمكن أن يعزز أو يعطل قراءة الترجمات. تشير النتائج إلى أن لاعبي L2 قد يختبرون تأثيرًا مزدوجًا: بينما قد يتخطون الترجمات بسبب الحمل المعرفي الزائد، قد يشاركون أيضًا بشكل أعمق مع النص، مما يؤدي إلى زيادة فترات التثبيت والأعداد. تشير التحليلات الاستكشافية ضمن مجموعة L2 إلى أن انخفاض الكفاءة يرتبط بزيادة الحساسية لتأثيرات تكرار الكلمات، مما يعزز الفكرة القائلة بأن لاعبي L2 يشاركون بشكل أكثر جهدًا مع الترجمات مقارنةً بنظرائهم من L1. بشكل عام، تؤكد النتائج على تعقيد معالجة الترجمات في اللعب وتأثيراتها على تعلم اللغة والانخراط المعرفي.

القيود

تسلط القيود في الدراسة الحالية الضوء على عدة عوامل حاسمة قد تؤثر على تفسير النتائج. أولاً، إن استخدام لعبة فيديو مغامرات تجارية كمواد تجريبية يقدم تباينًا في تجارب اللاعبين، مما يجعل من الصعب وضع معايير ثابتة لتقييم أداء الألعاب وفهم المحتوى. وبالتالي، يبقى تأثير أنماط قراءة الترجمات بين لاعبي L1 وL2 على أدائهم غامضًا. يُشجع البحث المستقبلي على استخدام ألعاب أكثر تحكمًا، قائمة على البحث أو تعليمية لمعالجة هذه الفجوات.

ثانيًا، لم يتم دمج درجة LexTALE، التي تم استخدامها فقط كمقياس إضافي ضمن مجموعة L2، كمتنبئ في نماذج التأثيرات المختلطة الرئيسية، حيث لم تتماشى مع السؤال البحثي الرئيسي. بالإضافة إلى ذلك، نظرًا لأن لاعبي L2 فقط هم من أكملوا اختبار LexTALE، فقد افتقر إلى القابلية للمقارنة مع المتحدثين من L1. تشير التباينات غير المتوقعة في جمع البيانات، على الرغم من أن جميع المشاركين من L2 استوفوا متطلبات القبول باللغة الإنجليزية، إلى الحاجة إلى تقييمات أكثر شمولاً للخلفية اللغوية وكفاءة L2 في الدراسات المستقبلية. أخيرًا، لم تأخذ الدراسة في الاعتبار خبرة الألعاب كمتنبئ أو متغير مصاحب، على الرغم من أن بيانات الطيار تشير إلى أن عوامل مثل سنوات خبرة الألعاب ونوع اللاعب المحدد ذاتيًا لم تتنبأ بشكل موثوق بأنماط حركة العين في لعبة الفيديو المختارة.

Journal: Applied Psycholinguistics, Volume: 47
DOI: https://doi.org/10.1017/s0142716426100940
Publication Date: 2026-01-01
Author(s): Haiting Lan et al.
Primary Topic: Subtitles and Audiovisual Media

Overview

This exploratory study investigates how players from different language backgrounds engage with text in video games, focusing on eye movement patterns during gameplay. A total of 104 participants, comprising 56 first-language (L1) English speakers and 48 second-language (L2) English learners, played a tutorial chapter of a commercial video game while their eye movements were recorded. The findings revealed that L2 players exhibited higher fixation counts and longer saccades at the subtitle level compared to L1 players. Additionally, L2 players demonstrated a stronger word frequency effect, indicated by longer fixations on lower-frequency words during both early and late stages of linguistic processing. These patterns suggest that L2 players employed a more effortful and in-depth scanning strategy when processing textual information.

The study contributes to understanding interactive reading in digital contexts, highlighting that L2 players’ more extensive scanning patterns may stem from linguistic limitations. This aligns with previous research indicating that L2 readers typically engage in more restorative processing than their L1 counterparts. The results imply that moderate processing effort in gameplay can enhance engagement with subtitles, particularly for L2 learners, as video games provide multimodal, contextualized, and goal-directed reading environments. This suggests that cognitively demanding tasks in gaming may facilitate deeper language processing and skill internalization, thus offering valuable insights for multimedia learning design. The study’s data and supplementary materials are accessible via the first author’s Open Science Framework repository.

Introduction

The introduction of the research paper highlights the advantages of multimedia-supported reading, particularly in the context of video games, for language learning. Studies indicate that reading within video games enhances engagement and motivation for language learners by integrating reading with problem-solving and interactive gameplay. This environment not only increases exposure to the target language but also transforms informal contexts into intentional learning experiences. The paper emphasizes the need for further research on text processing during gameplay, particularly comparing first-language (L1) and second-language (L2) reading patterns, as understanding these distinctions can inform instructional strategies for effective reading and comprehension in digital contexts.

The authors propose that L2 readers face unique challenges, such as lower reading comprehension and slower reading fluency compared to L1 readers, which may lead to different reading strategies. Previous studies have shown that L2 readers tend to engage in more effortful reading, characterized by longer fixation durations and higher fixation counts. The current study aims to investigate these differences in subtitle reading during gameplay using eye-tracking technology, which allows for real-time analysis of reading behavior. The findings suggest that L2 players exhibit greater processing effort and reliance on textual cues due to cognitive constraints, particularly in a multimodal environment that combines visual, auditory, and manual inputs. This research aims to deepen the understanding of how language background influences reading strategies in interactive contexts, thereby contributing to the broader field of digital reading and language acquisition.

Methods

In this study, Chapter 1 of the video game *Detroit: Become Human* (Quantic Dream, 2018) is utilized as a case study to explore communicative interactions in a digital environment. This chapter, titled “The Hostage,” serves as a tutorial where the player, embodying the android Connor, engages in a negotiation with a deviant android who has taken a child hostage. The gameplay involves menu-based communication, with subtitles and concurrent soundtracks enhancing the immersive experience. The subtitles are time-bound, akin to those in subtitled videos, which facilitates the player’s engagement with the narrative.

To assess participants’ second language (L2) proficiency, the study employs the Lexical Test for Advanced Learners of English (LexTALE) and the Australian version of the Language Experience and Proficiency Questionnaire (LEAP-Q). The LexTALE test, a word-form recognition task, requires participants to distinguish between words and non-words, serving as a reliable measure of vocabulary knowledge that correlates with broader L2 proficiency metrics. This methodological approach allows for a nuanced understanding of language use in interactive media, contributing to the field of psycholinguistics and digital communication studies.

Results

In the study, participants encountered an average of 95.63 subtitles (SD = 7.85), comprising approximately 608.37 words (SD = 51.87) during gameplay. To ensure the validity of eye-tracking data, fixation durations shorter than 60 ms or longer than 800 ms were excluded from the analyses, following established methodologies (Eskenazi, 2024; Negi & Mitra, 2020).

The analysis revealed no significant differences in cognitive load, as measured by the NASA-TLX, between the first language (L1) and second language (L2) groups, both overall and across individual subscales (p-values ≥ 0.1). Detailed descriptive statistics for subtitle-level and word-level eye movement measures are provided in Table 1, while the results of the eye movement analyses are summarized in Table 2. Notably, p-values reported in the results were adjusted using the Holm-Bonferroni correction to mitigate the family-wise error rate (Von der Malsburg & Angele, 2017).

Discussion

The discussion section of the research paper highlights the task-oriented nature of reading subtitles during video gameplay, emphasizing that players prioritize information relevant to their immediate gaming goals. The findings indicate that both intrinsic (e.g., skills, motivation) and extrinsic factors (e.g., social context) influence how players interpret reading goals, which subsequently affects their reading behavior. Notably, experienced gamers exhibit selective attention to subtitles, focusing more on text that provides immediate action-related information. The study builds on this task-oriented view to explore how players allocate attention to subtitles, revealing that L2 players demonstrate greater processing effort compared to L1 players, as evidenced by higher fixation counts and larger saccade amplitudes.

Furthermore, the section discusses multimodal processing in gameplay, where players must integrate various sensory inputs, including subtitles, visuals, and audio. Cognitive load theory is applied to understand the different types of cognitive load experienced by players, which can either enhance or disrupt subtitle reading. The results suggest that L2 players may experience a dual effect: while they may skip subtitles due to cognitive overload, they may also engage more deeply with the text, leading to increased fixation durations and counts. The exploratory analysis within the L2 cohort indicates that lower proficiency correlates with greater sensitivity to word frequency effects, reinforcing the notion that L2 players engage more effortfully with subtitles than their L1 counterparts. Overall, the findings underscore the complexity of subtitle processing in gameplay and its implications for language learning and cognitive engagement.

Limitations

The limitations of the present study highlight several critical factors that may affect the interpretation of findings. Firstly, the use of a commercial adventure video game as the experimental material introduces variability in player experiences, making it difficult to establish fixed criteria for assessing gaming performance and content comprehension. Consequently, the influence of subtitle-reading patterns among L1 and L2 players on their performance remains ambiguous. Future research is encouraged to utilize more controlled, research-based or educational games to address these gaps.

Secondly, the LexTALE score, which was employed solely as a supplementary measure within the L2 group, was not integrated as a predictor in the main mixed-effects models, as it did not align with the primary research question. Additionally, since only L2 players completed the LexTALE test, it lacked comparability for L1 speakers. The unexpected variation in data collection, despite all L2 participants meeting English-language admission requirements, suggests the need for more comprehensive assessments of language background and L2 proficiency in future studies. Lastly, the study did not account for gaming experience as a predictor or covariate, despite pilot data indicating that factors such as years of gaming experience and self-identified gamer type did not reliably predict eye-movement patterns in the selected video game.