جهاز فك تشفير واجهة الدماغ والآلة المستوحى من علوم الأعصاب باستخدام التعلم العميق Neuroscience-Inspired Deep Learning Brain–Machine Interface Decoder

شارك:
المجلة: Bioengineering، المجلد: 13، العدد: 4
DOI: https://doi.org/10.3390/bioengineering13040440
PMID: https://pubmed.ncbi.nlm.nih.gov/42072234
تاريخ النشر: 2026-04-10
المؤلف: Hongyun Ou وآخرون
الموضوع الرئيسي: تخطيط الدماغ وواجهات الدماغ-الكمبيوتر

نظرة عامة

تقدم هذه الورقة البحثية مشفر CNN-LSTM أحادي الاتجاه جديد لواجهات الدماغ والآلة (BMIs)، مصمم لتعزيز فك رموز النوايا الحركية من النشاط العصبي. غالبًا ما تستخدم أجهزة فك التشفير التقليدية هياكل أحادية غير قادرة على تمثيل الإشارات العصبية المتميزة المرتبطة بحركات المفاصل المختلفة، مما يعيق قابليتها للتعميم. يستخدم النموذج المقترح فروع CNN-LSTM متوازية لتحليل ديناميات التمديد والانثناء بشكل منفصل، واستخراج ميزات زمنية مكانية من بيانات النبضات العصبية للتنبؤ بمتغيرات المفاصل الاتجاهية. تشير النتائج إلى أن هذا المشفر لا يتطابق فقط مع أداء نماذج CNN-LSTM التقليدية عند تدريبه على جميع المهام، بل يتفوق أيضًا بشكل كبير على كل من CNN-LSTM ونماذج الانحدار الخطي في سيناريوهات التعميم عبر الأهداف.

علاوة على ذلك، يلتقط نموذج CNN-LSTM أحادي الاتجاه أنماط التقلص المشترك ذات الصلة الفسيولوجية، مما يوفر رؤى أعمق في التحكم الحركي. تستنتج الدراسة أن دمج فك التشفير المستوحى من علوم الأعصاب في هياكل التعلم العميق يعزز من قوة ومرونة BMIs، مما يشير إلى اتجاه واعد للتطبيقات المستقبلية في الأطراف الصناعية وإعادة التأهيل. بشكل عام، تدعو النتائج إلى دمج مبادئ علوم الأعصاب في تصميم BMIs لتطوير أنظمة أكثر شمولية وفعالية.

مقدمة

تناقش مقدمة هذه الورقة البحثية تطوير وتحديات واجهات الدماغ والآلة (BMIs)، التي تسهل التحكم في الأجهزة الخارجية من خلال الإشارات العصبية. يتم تصنيف BMIs إلى أنواع غازية وغير غازية، حيث تعتمد الأنظمة غير الغازية على إشارات تخطيط الدماغ الكهربائي (EEG) التي غالبًا ما تكون مشوشة، بينما توفر الأنظمة الغازية، مثل تخطيط الدماغ الكهربائي القشري (ECoG)، إشارات ذات جودة أعلى. تسلط الورقة الضوء على قيود طرق فك التشفير التقليدية، التي غالبًا ما تستخدم المميزين الخطيين وتكافح مع الطبيعة غير الثابتة للإشارات العصبية. لقد حسنت التطورات الأخيرة في الذكاء الاصطناعي، وخاصة الشبكات العصبية العميقة (DNNs)، بشكل كبير من قدرات فك التشفير، مع نماذج بارزة مثل EEGnet وDeepConvNet التي تعزز الأداء في تطبيقات متنوعة، بما في ذلك إعادة بناء الوظائف الحركية والمعرفية.

يقترح المؤلفون بنية DNN جديدة، تُسمى CNN-LSTM أحادي الاتجاه، مصممة لفك رموز متغيرات حركة المفاصل في الأطراف العلوية بناءً على رؤى من الأبحاث السابقة حول ترميز قشرة الدماغ الحركية. تتميز هذه البنية بفروع مستقلة لتقدير التمديد والانثناء للمفاصل، ووحدة استخراج ميزات تلافيفية، ووحدة إخراج تستخدم LSTM لنمذجة الأنماط الديناميكية. تم التحقق من فعالية هذا النهج باستخدام مجموعة بيانات من قرد ماكاك ياباني، مما يظهر أداءً متفوقًا في مهام فك التشفير مقارنة بالنماذج التقليدية. تكمن المساهمات الرئيسية لهذا العمل في دمج مبادئ علوم الأعصاب مع تقنيات التعلم العميق لتقدم التطبيقات في الأطراف الصناعية وإعادة التأهيل.

طرق

توضح قسم “المواد والطرق” تصميم التجربة والإجراءات المستخدمة في الدراسة. يوضح المواد المحددة المستخدمة، بما في ذلك أي مواد كيميائية، معدات، وعينات بيولوجية، مما يضمن إمكانية إعادة إنتاج التجارب. يتم وصف المنهجية بطريقة خطوة بخطوة، مع تسليط الضوء على التقنيات المستخدمة لجمع البيانات وتحليلها، مثل الاختبارات الإحصائية أو النماذج الحسابية.

بالإضافة إلى ذلك، قد يتناول القسم الضوابط المنفذة للتحقق من النتائج وأي اعتبارات أخلاقية تم أخذها في الاعتبار خلال البحث. بشكل عام، يخدم هذا القسم لتوفير نظرة شاملة على الإطار التجريبي، مما يسمح بالتقييم النقدي وإعادة إنتاج نتائج الدراسة.

نتائج

في هذه الدراسة، قدم المؤلفون بنية جديدة للشبكات العصبية العميقة تُسمى مشفر CNN-LSTM أحادي الاتجاه، تهدف إلى فك رموز السرعة الزاوية وعزم المفاصل في الطرف العلوي لقرد أثناء حركات التمديد أو الانثناء المعزولة. تتميز البنية بفروع CNN-LSTM متوازية تلتقط بشكل مستقل التمثيلات المكانية والزمنية لكل نوع حركة. تتم معالجة هذه التمثيلات من خلال وحدة إخراج تتكون من طبقة LSTM تليها طبقة متصلة بالكامل، مما يسهل رسم ميزات عالية الأبعاد إلى تسلسلات إخراج ديناميكية مستمرة. يُفترض أن التصميم المعياري يعزز قدرة النموذج على فصل التمثيلات الحركية المعقدة، مما يحسن من قابليته للتعميم عبر سياقات حركة مختلفة مقارنةً بالهياكل التقليدية لفك التشفير الأحادي.

لتقييم أداء فك التشفير للنموذج المقترح، استخدم الباحثون مجموعات بيانات واسعة من بيانات إطلاق النبضات العصبية وبيانات الحركة التي تم جمعها خلال مهام الوصول من المركز إلى الخارج في قرد غير إنساني. تم تدريب النموذج على تجارب أهداف محددة (الأهداف 4 و5) وتم تقييمه لاحقًا على تجارب تتضمن أهدافًا أخرى لمحاكاة سيناريوهات نقل التعلم. كشفت التحليلات المقارنة أن مشفر CNN-LSTM أحادي الاتجاه تفوق على كل من مشفر CNN-LSTM التقليدي ونموذج الانحدار الخطي الأساسي من حيث أداء التعميم، مما يبرز إمكانيته لفك التشفير العصبي الفعال في مهام حركية متنوعة.

مناقشة

في هذا القسم، يقدم المؤلفون نموذج CNN-LSTM أحادي الاتجاه، الذي يعزز من قابلية التعميم على مستوى المهام من خلال فك رموز متغيرات المفاصل بشكل مستقل لحركات التمديد والانثناء. استخدمت الدراسة بيانات النشاط العصبي من قشرة الدماغ الحركية للقردة اليابانية خلال مهمة ضرب من المركز إلى الخارج، حيث تم إعداد مجموعة البيانات بعناية لضمان مسارات حركة متسقة. استخدم المؤلفون نهجًا منهجيًا لمعالجة البيانات، بما في ذلك فرز النبضات، ومحاذاة المسارات، والتطبيع، مما أدى في النهاية إلى تشكيل مجموعة بيانات شاملة للتحليل.

تتكون بنية المشفر من عدة فروع CNN-LSTM، كل منها مصمم لتقدير المعلمات لحركات التمديد والانثناء بشكل منفصل. يسمح هذا الهيكل بالتقاط التفاصيل الحركية الدقيقة، مثل تقلص العضلات المشترك، وهو أمر حاسم للحفاظ على استقرار الطرف العلوي. تشير النتائج إلى أن المشفر أحادي الاتجاه تفوق بشكل كبير على نماذج CNN-LSTM التقليدية ونماذج الانحدار الخطي، محققًا تحسينات تتراوح بين 48% إلى 76% في أداء فك التشفير عبر معلمات الإخراج المختلفة. ينسب المؤلفون قابلية التعميم المحسنة لنموذجهم إلى قدرته على حساب التقلص المشترك بشكل مستقل، مما يوفر تمثيلًا أكثر دقة للنشاط العصبي الأساسي المرتبط باتجاهات الحركة المختلفة.

القيود

تسلط الدراسة الضوء على القيود المرتبطة بعملية ضبط دقيق لنموذج مشفر تم تدريبه مسبقًا على بيانات من الأهداف IV وV. على الرغم من أن النموذج أظهر القدرة على التعميم إلى أهداف إضافية، إلا أن فعالية الضبط الدقيق تعتمد على توفر بيانات كافية. بالإضافة إلى ذلك، هناك خطر من أن يكون النموذج المدرب مسبقًا متحيزًا بشكل مفرط، وهو مشكلة شائعة في السيناريوهات السريرية الحقيقية.

لتخفيف هذه التحديات، تم اقتراح تقنيات تعلم قليلة اللقطات المختلفة، بما في ذلك التعلم الميتا، وتكييف المجال، وتعلم القياس، لتسهيل نقل المعرفة عبر مهام متعددة. يؤكد المؤلفون على أهمية التحقق من نموذجهم أحادي الاتجاه ضمن هذه الأطر لتعزيز قابليته العملية في أنظمة واجهة الدماغ والآلة (BMI).

Journal: Bioengineering, Volume: 13, Issue: 4
DOI: https://doi.org/10.3390/bioengineering13040440
PMID: https://pubmed.ncbi.nlm.nih.gov/42072234
Publication Date: 2026-04-10
Author(s): Hongyun Ou et al.
Primary Topic: EEG and Brain-Computer Interfaces

Overview

This research paper presents a novel Single-Direction CNN-LSTM decoder for brain-machine interfaces (BMIs), designed to enhance the decoding of motor intentions from neural activity. Traditional decoders often utilize monolithic architectures that inadequately represent the distinct neural signals associated with various joint movements, which hampers their generalizability. The proposed model employs parallel CNN-LSTM branches to separately analyze extension and flexion dynamics, extracting spatial-temporal features from neural spike data to predict directional joint variables. The results indicate that this decoder not only matches the performance of conventional CNN-LSTM models when trained on all tasks but also significantly outperforms both CNN-LSTM and linear regression baselines in cross-target generalization scenarios.

Furthermore, the Single-Direction CNN-LSTM model captures physiologically relevant co-contraction patterns, thereby providing deeper insights into motor control. The study concludes that integrating neuroscience-inspired modular decoding into deep learning architectures enhances the robustness and adaptability of BMIs, suggesting a promising direction for future applications in prosthetics and rehabilitation. Overall, the findings advocate for the incorporation of neuroscience principles in the design of BMIs to develop more universal and effective systems.

Introduction

The introduction of this research paper discusses the development and challenges of brain-machine interfaces (BMIs), which facilitate control of external devices through neural signals. BMIs are categorized into invasive and non-invasive types, with non-invasive systems relying on electroencephalography (EEG) signals that are often noisy, while invasive systems, such as electrocorticography (ECoG), provide higher quality signals. The paper highlights the limitations of traditional decoding methods, which often utilize linear discriminators and struggle with the non-stationary nature of neural signals. Recent advancements in artificial intelligence, particularly deep neural networks (DNNs), have significantly improved decoding capabilities, with notable models like EEGnet and DeepConvNet enhancing performance in various applications, including motor and cognitive function reconstruction.

The authors propose a novel DNN architecture, termed the Single-Direction CNN-LSTM, designed to decode upper-limb joint movement variables based on insights from previous research on motor cortex encoding. This architecture features independent branches for estimating joint extension and flexion, a convolutional feature extraction module, and an output module that employs LSTM for dynamic pattern modeling. The effectiveness of this approach was validated using a dataset from a Japanese macaque, demonstrating superior performance in decoding tasks compared to conventional models. The main contributions of this work lie in integrating neuroscience principles with deep learning techniques to advance prosthetic and rehabilitation applications.

Methods

The “Materials and Methods” section outlines the experimental design and procedures employed in the study. It details the specific materials used, including any reagents, equipment, and biological samples, ensuring reproducibility of the experiments. The methodology is described in a stepwise manner, highlighting the techniques utilized for data collection and analysis, such as statistical tests or computational models.

Additionally, the section may address the controls implemented to validate the results and any ethical considerations taken into account during the research. Overall, this section serves to provide a comprehensive overview of the experimental framework, allowing for critical evaluation and replication of the study’s findings.

Results

In this study, the authors introduced a novel deep neural network architecture called the Single-Direction CNN-LSTM Decoder, aimed at decoding the angular velocity and joint torque of a monkey’s upper limb during isolated extension or flexion movements. The architecture features parallel CNN-LSTM branches that independently capture spatial and temporal representations for each movement type. These representations are processed through an output module consisting of an LSTM layer followed by a fully connected layer, facilitating the mapping of high-dimensional features to continuous dynamic output sequences. The modular design is posited to enhance the model’s ability to disentangle complex motor representations, thereby improving generalizability across different movement contexts compared to traditional monolithic decoding architectures.

To assess the decoding performance of the proposed model, the researchers utilized extensive datasets of neural spike-firing and kinematic data collected during center-out reaching tasks in a non-human primate. The model was trained on specific target trials (Targets 4 and 5) and subsequently evaluated on trials involving other targets to simulate transfer learning scenarios. Comparative analyses revealed that the Single-Direction CNN-LSTM Decoder outperformed both a conventional CNN-LSTM decoder and a baseline linear regression model in terms of generalization performance, underscoring its potential for effective neural decoding in diverse motor tasks.

Discussion

In this section, the authors present the Single-Direction CNN-LSTM model, which enhances task-level generalizability by independently decoding joint variables for extension and flexion movements. The study utilized neural activity data from the motor cortex of Japanese monkeys during a center-out hitting task, where the dataset was meticulously prepared to ensure consistent movement trajectories. The authors employed a systematic approach to preprocess the data, including spike sorting, trajectory alignment, and normalization, ultimately forming a comprehensive dataset for analysis.

The decoder architecture consists of multiple CNN-LSTM branches, each designed to estimate parameters for extension and flexion movements separately. This structure allows for the effective capture of nuanced motor details, such as muscle co-contraction, which is critical for maintaining upper-limb stability. The results indicate that the Single-Direction decoder significantly outperformed conventional CNN-LSTM and linear regression models, achieving improvements of approximately 48% to 76% in decoding performance across various output parameters. The authors attribute the enhanced generalizability of their model to its ability to independently account for co-contraction, thereby providing a more accurate representation of the underlying neural activity associated with different movement directions.

Limitations

The study highlights limitations associated with the fine-tuning process of a decoder model pre-trained on data from Targets IV and V. Although the model demonstrated the ability to generalize to additional targets, the effectiveness of fine-tuning is contingent upon the availability of sufficient data. Additionally, there is a risk of the pre-trained model being overly biased, which is a common issue in real clinical scenarios.

To mitigate these challenges, various few-shot learning techniques, including meta-learning, domain adaptation, and metric learning, have been proposed to facilitate knowledge transfer across multiple tasks. The authors emphasize the importance of validating their Single-Direction model within these frameworks to enhance its practical applicability in Brain-Machine Interface (BMI) systems.