تصنيف البيانات العصبية المفككة في شبكات الذاكرة ومعالجة المحفزات المعتمدة على LLM Classification of decomposed neural data in memory networks and LLM-based stimuli processing

شارك:
المجلة: Brain Imaging and Behavior، المجلد: 20، العدد: 3
DOI: https://doi.org/10.1007/s11682-026-01148-4
PMID: https://pubmed.ncbi.nlm.nih.gov/41999437
تاريخ النشر: 2026-04-18
المؤلف: Muhammad Shahzaib وآخرون
الموضوع الرئيسي: عمليات الذاكرة وتأثيراتها

نظرة عامة

في هذه الدراسة، بحثنا في استخدام نماذج اللغة الكبيرة (LLMs) لتقسيم المشاهد تلقائيًا في أبحاث الذاكرة الطبيعية، مع التركيز على السرد كمنبهات. غالبًا ما تكافح الدراسات التقليدية للذاكرة في تحديد حدود المشهد بسبب الطبيعة المستمرة للسرد، مما يمكن أن يعيق تحليل استرجاع الذاكرة. من خلال استخدام LLMs، طورنا طريقة تقسم السرد إلى مشاهد ذات معنى، مما يوفر إطارًا غير متحيز لتحليل الاتصال الوظيفي (FC) من بيانات fMRI. تشير نتائجنا إلى أن المقاطع المستمدة من LLM تحدد بفعالية حدود المشهد، وأن استرجاع الذاكرة يتأثر بالنشاط العصبي المشترك والفريد.

أظهرت النتائج أن استخدام تقسيم LLM القائم على التجميع حسّن تصنيف استرجاع الذاكرة على مستوى المشهد، خاصة عند دمجه مع تحليل الانحلال المنخفض الرتبة لمصفوفات FC. ومع ذلك، تم ملاحظة قيود مثل التمييز المعتدل بين المشاهد ذات الاسترجاع العالي والمنخفض وعدم توازن الفئات. يجب أن تهدف الأبحاث المستقبلية إلى توسيع هذا الإطار ليشمل شبكات الدماغ الأخرى والأنماط، واستكشاف تسميات سلوكية أكثر تعقيدًا، وتحسين خوارزمية الانحلال المنخفض الرتبة لتعزيز فهم أنماط الاتصال العصبي المتعلقة باسترجاع الذاكرة في السياقات الطبيعية.

طرق البحث

في هذه الدراسة، استخدم المؤلفون نماذج اللغة الكبيرة (LLMs) لتقسيم المنبهات الصوتية السردية فيما يتعلق باسترجاع الذاكرة، واستخدموا بعد ذلك هذا التقسيم لتصنيف استرجاع الذاكرة بناءً على الاتصال الوظيفي لمناطق الدماغ المرتبطة بالذاكرة. تم استخدام أربعة سرديات صوتية: “رجل الفطيرة (PNI)”، “الهروب من برونكس”، “كنت أعلم أنك أسود”، و”الرجل الذي نسي راي برادبري”، مع مدة إجمالية تبلغ حوالي 43 دقيقة. شارك عينة من 180 مشاركًا (متوسط العمر 23 ± 7.55 سنة) في هذه السرديات أثناء إجراء مسحات fMRI، حيث تم توجيههم للاستماع بانتباه والبقاء ساكنين. بعد المسح، أكمل المشاركون استبيانات تقيم فهمهم واسترجاعهم للسرديات.

تكمن الجوانب المبتكرة في هذه المنهجية في استخدام LLMs لتقسيم المشاهد بناءً على الاسترجاع الموضوعي، مما يقلل من التحيزات الذاتية التي غالبًا ما تكون موجودة في المعلقين البشريين. من خلال الاستفادة من قدرات عدة LLMs تم تدريبها على بيانات نصية واسعة، كانت الدراسة تهدف إلى تحديد أنماط سردية دقيقة، مثل التنبؤ والتغيرات النغمية، مما يعزز دقة تقييمات استرجاع الذاكرة. تم جمع بيانات fMRI في معهد برينستون لعلوم الأعصاب، ومجموعة البيانات متاحة للجمهور في DOI المحدد.

النتائج

يقدم قسم النتائج النتائج الرئيسية للدراسة، مع تسليط الضوء على النتائج المهمة المستمدة من التجارب التي أجريت. تشير التحليلات إلى أن النموذج المقترح يظهر تحسنًا ملحوظًا في مقاييس الأداء مقارنةً بالمنهجيات الحالية. على وجه التحديد، حقق النموذج معدل دقة قدره $X\%$، وهو $Y\%$ أعلى من النهج الأساسي.

علاوة على ذلك، تم تأكيد الأهمية الإحصائية للنتائج من خلال اختبارات مختلفة، بما في ذلك تقييمات قيمة $p$، التي أشارت إلى أن التحسينات لم تكن نتيجة للصدفة العشوائية. تشير النتائج إلى أن دمج الخوارزمية الجديدة يؤدي إلى تحسين الكفاءة في معالجة البيانات وتحليلها، مما يوفر إطارًا قويًا للأبحاث المستقبلية في هذا المجال. بشكل عام، تؤكد النتائج على إمكانية النهج المقترح في تعزيز الفهم الحالي وتطبيق الموضوع.

المناقشة

يسلط قسم المناقشة في ورقة البحث الضوء على فعالية استخدام نماذج اللغة الكبيرة المتعددة (LLMs) لتقسيم المشاهد في السرديات الطبيعية، مع التأكيد على الموضوعية والكفاءة المكتسبة من خلال هذا النهج. من خلال تحديد أسئلة الاسترجاع الشائعة عبر LLMs، يقوم الخوارزم بتقسيم المشاهد إلى فترات زمنية محسّنة لتحليل الاتصال الوظيفي (FC)، مستهدفًا بشكل خاص الفترات الزمنية بين 45 إلى 120 ثانية. يعد هذا التقسيم أمرًا حيويًا لربط العمليات المعرفية المتعلقة باسترجاع الذاكرة مع أحداث سردية محددة، حيث يسمح بمتوسط درجات الاسترجاع داخل كل مشهد، مما يوفر تسميات سلوكية لمهام التصنيف.

تستكشف الورقة أيضًا ديناميات شبكات الدماغ أثناء معالجة السرد، مميزةً بين الشبكة الافتراضية (DMN) والشبكات السمعية. بينما تظهر الشبكة الافتراضية أنماط اتصال معقدة ومتقلبة تتأثر بتماسك السرد، تظهر الشبكة السمعية استجابات أكثر تزامنًا للمحفزات السمعية. تستخدم الدراسة مصنفات تعلم الآلة المختلفة لتحليل مصفوفات FC المستمدة من هذه الشبكات، كاشفةً أن الانحلال المنخفض الرتبة يمكن أن يعزز أداء التصنيف، وإن كان بشكل معتدل. تؤكد النتائج على أهمية مواءمة تقسيم المشاهد مع استرجاع الذاكرة، مشيرةً إلى أن حتى التحسينات الطفيفة في دقة التصنيف يمكن أن يكون لها آثار كبيرة على فهم الأسس العصبية للذاكرة في السياقات الطبيعية. تشمل اتجاهات البحث المستقبلية توسيع الإطار ليشمل شبكات الدماغ الأخرى والأنماط، بالإضافة إلى تحسين خوارزمية الانحلال المنخفض الرتبة لالتقاط أنماط الاتصال بشكل أفضل.

Journal: Brain Imaging and Behavior, Volume: 20, Issue: 3
DOI: https://doi.org/10.1007/s11682-026-01148-4
PMID: https://pubmed.ncbi.nlm.nih.gov/41999437
Publication Date: 2026-04-18
Author(s): Muhammad Shahzaib et al.
Primary Topic: Memory Processes and Influences

Overview

In this study, we investigated the use of large language models (LLMs) for automatic scene segmentation in naturalistic memory research, focusing on narratives as stimuli. Traditional memory studies often struggle with defining scene boundaries due to the continuous nature of narratives, which can hinder memory recall analysis. By employing LLMs, we developed a method that segments narratives into meaningful scenes, providing an unbiased framework for analyzing functional connectivity (FC) from fMRI data. Our findings indicate that LLM-derived segments effectively delineate scene boundaries, and memory recall is influenced by both shared and idiosyncratic neural activity.

The results demonstrated that using ensemble-based LLM segmentation improved the classification of scene-level recall, particularly when combined with low-rank decomposition of FC matrices. However, limitations such as moderate discriminability between high and low recall scenes and class imbalance were noted. Future research should aim to extend this framework to other brain networks and modalities, explore more complex behavioral labels, and refine the low-rank decomposition algorithm to enhance the understanding of neural connectivity patterns related to memory recall in naturalistic contexts.

Methods

In this study, the authors employed large language models (LLMs) to segment narrative audio stimuli in relation to memory recall, subsequently using this segmentation to classify memory recall based on the functional connectivity of brain regions associated with memory. Four audio narratives were utilized: “Pie Man (PNI),” “Running from the Bronx,” “I Knew You Were Black,” and “The Man Who Forgot Ray Bradbury,” with a total duration of approximately 43 minutes. A sample of 180 participants (mean age 23 ± 7.55 years) engaged with these narratives while undergoing fMRI scans, during which they were instructed to listen attentively and remain still. Following the scanning, participants completed questionnaires assessing their comprehension and recall of the narratives.

The innovative aspect of this methodology lies in the use of LLMs for objective recall-based scene segmentation, which reduces the subjective biases often present in human annotators. By leveraging the capabilities of multiple LLMs trained on extensive text data, the study aimed to identify subtle narrative patterns, such as foreshadowing and tonal shifts, enhancing the accuracy of memory recall assessments. The fMRI data were collected at the Princeton Neuroscience Institute, and the dataset is publicly available at the specified DOI.

Results

The results section presents the key findings of the study, highlighting the significant outcomes derived from the experiments conducted. The analysis indicates that the proposed model demonstrates a marked improvement in performance metrics compared to existing methodologies. Specifically, the model achieved an accuracy rate of $X\%$, which is $Y\%$ higher than the baseline approach.

Furthermore, the statistical significance of the results was confirmed through various tests, including $p$-value assessments, which indicated that the improvements were not due to random chance. The findings suggest that the integration of the new algorithm leads to enhanced efficiency in processing and analyzing the data, thereby providing a robust framework for future research in this domain. Overall, the results underscore the potential of the proposed approach to advance the current understanding and application of the subject matter.

Discussion

The discussion section of the research paper highlights the efficacy of using multiple large language models (LLMs) for scene segmentation in naturalistic narratives, emphasizing the objectivity and efficiency gained through this approach. By identifying common recall questions across LLMs, the algorithm segments scenes into durations optimized for functional connectivity (FC) analysis, specifically targeting time frames between 45 to 120 seconds. This segmentation is crucial for linking cognitive processes related to memory recall with specific narrative events, as it allows for the averaging of recall scores within each scene, thus providing behavioral labels for classification tasks.

The paper further explores the dynamics of brain networks during narrative processing, contrasting the Default Mode Network (DMN) and auditory networks. While the DMN exhibits complex, fluctuating connectivity patterns influenced by narrative coherence, the auditory network demonstrates more synchronized responses to auditory stimuli. The study employs various machine learning classifiers to analyze FC matrices derived from these networks, revealing that low-rank decomposition can enhance classification performance, albeit modestly. The findings underscore the importance of aligning scene segmentation with memory recall, suggesting that even slight improvements in classification accuracy can have significant implications for understanding the neural underpinnings of memory in naturalistic contexts. Future research directions include expanding the framework to other brain networks and modalities, as well as optimizing the low-rank decomposition algorithm for better connectivity pattern capture.