DOI: https://doi.org/10.1038/s41598-026-48162-6
PMID: https://pubmed.ncbi.nlm.nih.gov/42031839
تاريخ النشر: 2026-04-24
المؤلف: Qi Shasha
الموضوع الرئيسي: تحليل المشاعر واستخراج الآراء
نظرة عامة
تسلط هذه الورقة البحثية الضوء على التطبيق الناجح لنموذج اللغة الكبير RoBERTa (LLM) في تحليل المشاعر ونمذجة الموضوعات لمراجعات المستهلكين عبر الإنترنت. من خلال دمج الميزات النصية الكلاسيكية، مثل TF-IDF، مع التضمينات السياقية المتقدمة وآليات الانتباه، تحقق الدراسة دقة قصوى تبلغ 93.59%، متجاوزة بشكل كبير نماذج التعلم الآلي التقليدية ونماذج التعلم العميق السابقة. تسهل قدرة النموذج على تمييز الأنماط الدلالية والنحوية المعقدة فهمًا دقيقًا لمشاعر المستهلكين والاتجاهات الموضوعية، مما يوفر رؤى قيمة للتسويق وإدارة علاقات العملاء.
على الرغم من نقاط قوته، تعترف الدراسة بالقيود، بما في ذلك الاعتماد على مجموعات البيانات المتاحة للجمهور التي قد لا تمثل الطيف الكامل لسلوكيات المستهلكين عبر مجالات أو لغات مختلفة. بالإضافة إلى ذلك، قد تعيق المتطلبات الحاسوبية للنموذج قابلية التوسع للتطبيقات على نطاق واسع. تهدف الأبحاث المستقبلية إلى معالجة هذه القيود من خلال استكشاف تقنيات التكيف عبر المجالات، وتعزيز القدرات متعددة اللغات، وتطوير إطار عمل مشترك لنمذجة المشاعر والموضوعات يتماشى مع الموضوعات السياقية والمشاعر. كما يُقترح دمج أدوات الشرح وأنظمة مراقبة المشاعر في الوقت الحقيقي لتحسين التطبيقات العملية وتعميق الرؤى حول سلوكيات المستهلك الديناميكية، مما يربط في النهاية المشاعر بمحركاتها الموضوعية.
طرق
ت outlines منهجية البحث المقترحة نهجًا منهجيًا لتحليل سلوك المستهلكين الرقميين من خلال فحص المحتوى النصي للمراجعات التي ينشئها المستخدمون. الهدف الرئيسي هو استخراج رؤى قابلة للتنفيذ تتعلق بالمشاعر والنوايا والأنماط الموضوعية الأساسية داخل المراجعات. لتحقيق ذلك، طور الباحثون خط أنابيب تحليلي منظم يدمج تقنيات معالجة اللغة الطبيعية (NLP) والتعلم الآلي (ML) والتعلم العميق (DL) والذكاء الاصطناعي القابل للتفسير (XAI). يتم تقديم مخطط إطار العمل الذي يوضح هذه المنهجية في الشكل 1، مع التأكيد على الترابط بين المكونات التحليلية المختلفة المستخدمة في الدراسة.
النتائج
تكشف نتائج الدراسة عن تحيز إيجابي كبير في مراجعات المستهلكين، حيث تم تقييم 67.8% من المراجعات بـ 5 نجوم، مما يشير إلى مستويات عالية من الرضا. ومع ذلك، تشير وجود مراجعات من 1 نجمة إلى 4 نجوم إلى وجود جزء ملحوظ من العملاء غير الراضين أو المحايدين، مما يستدعي مزيدًا من التحقيق. يظهر تحليل المشاعر وجود علاقة واضحة بين تقييمات النجوم والمشاعر الإيجابية، بينما لا تختلف الحيادية في المشاعر بشكل كبير عبر التقييمات، مما يشير إلى استجابة أقل تحيزًا. يشير تحليل طول المراجعة إلى أن المراجعات الإيجابية والسلبية تميل إلى أن تكون أقصر، مما يعكس تعليقات مختصرة، بينما تكون المراجعات المحايدة أكثر وصفًا. يظهر التحليل الزمني لتقديم المراجعات توزيعًا مائلًا إلى اليمين، مما يشير إلى أن معظم المراجعات تتجمع حول الإصدارات الجديدة للمنتجات أو الجهود التسويقية.
تستخدم الدراسة نماذج تصنيف المشاعر المتقدمة، وخاصة نموذج RoBERTa-Large، الذي يحقق دقة مثيرة للإعجاب تبلغ 93.59%. يتفوق هذا النموذج على طرق التعلم الآلي التقليدية وهياكل التعلم العميق الأخرى من خلال التقاط العلاقات الدلالية المعقدة في تعليقات المستهلكين بشكل فعال. تؤكد اختبارات الدلالة الإحصائية على قوة نموذج RoBERTa-Large، مما يظهر قدرته الفائقة على تعلم الدلالات السياقية مقارنة بالنماذج الأساسية. يعزز دمج نمذجة الموضوعات وآليات التفسير مثل SHAP وLIME كل من الأداء والشفافية للنموذج، مما يسمح بفهم دقيق لمشاعر المستهلك. بشكل عام، تؤكد النتائج على إمكانيات نماذج اللغة الكبيرة المدربة مسبقًا في تعزيز تحليل المشاعر ضمن مشهد المستهلك الرقمي.
المناقشة
تسلط قسم المناقشة في الورقة البحثية الضوء على التقدمات الأخيرة في تحليل سلوك المستهلك الرقمي، لا سيما من خلال تطبيق تقنيات التعلم العميق لتصنيف المشاعر ونمذجة الموضوعات. تشير إلى أنه بينما حققت نماذج التعلم العميق مثل LSTM وCNN وBiGRU دقة عالية في تصنيف المشاعر – على سبيل المثال، حقق نموذج BiGRU-LSTM الهجين دقة 93.9% على مراجعات أمازون – يمكن أن تؤدي نماذج التعلم الآلي التقليدية مثل Random Forest وLogistic Regression أداءً مشابهًا، خاصة على البيانات المنظمة. يؤكد القسم على قيود التعلم العميق، بما في ذلك الإفراط في التكيف والتعقيد، خاصة في مجموعات البيانات الصغيرة. أظهرت النماذج المعتمدة على المحولات، مثل BERT وRoBERTa، أداءً متفوقًا في تحليل المشاعر ولكنها تتطلب موارد حاسوبية كبيرة وقد تفتقر إلى القابلية للتفسير.
تقترح الورقة إطارًا تحليليًا متكاملًا يجمع بين RoBERTa لتصنيف المشاعر مع تخصيص ديريشليت الكامن (LDA) لنمذجة الموضوعات، مما يعزز كل من الدقة التنبؤية والقابلية للتفسير. يستخدم هذا الإطار SHAP وLIME للشرح، مما يسمح بفهم دقيق لمشاعر وسلوك المستهلك. تشير النتائج إلى أن المستهلكين يعبرون عن المشاعر بشكل مختلف عبر المنصات، حيث تركز مراجعات أمازون على خصائص المنتج بينما تبرز مراجعات Yelp العوامل التجريبية. تشير قدرة النموذج على التقاط هذه التمييزات إلى فهم قوي لديناميات مشاعر المستهلك، مما يعزز أهمية التحليل السياقي والدلالي في أبحاث سلوك المستهلك الرقمي. بشكل عام، تؤكد الدراسة على إمكانيات النماذج الهجينة لتوفير رؤى أعمق في مشاعر المستهلك مع معالجة التحديات المتعلقة بالتعميم والقابلية للتفسير.
DOI: https://doi.org/10.1038/s41598-026-48162-6
PMID: https://pubmed.ncbi.nlm.nih.gov/42031839
Publication Date: 2026-04-24
Author(s): Qi Shasha
Primary Topic: Sentiment Analysis and Opinion Mining
Overview
This research paper section highlights the successful application of the RoBERTa large language model (LLM) for sentiment analysis and topic modeling of online consumer reviews. By integrating classical textual features, such as TF-IDF, with advanced contextual embeddings and attention mechanisms, the study achieves a peak accuracy of 93.59%, significantly surpassing traditional machine learning and earlier deep learning models. The model’s capacity to discern complex semantic and syntactic patterns facilitates a nuanced understanding of consumer sentiments and thematic trends, offering valuable insights for marketing and customer relationship management.
Despite its strengths, the study acknowledges limitations, including reliance on publicly available datasets that may not represent the full spectrum of consumer behaviors across various domains or languages. Additionally, the computational demands of the model could hinder scalability for large-scale applications. Future research aims to address these limitations by exploring cross-domain adaptation techniques, enhancing multilingual capabilities, and developing a joint sentiment-topic modeling framework that aligns contextualized topics with sentiments. The incorporation of explainability tools and real-time sentiment monitoring systems is also proposed to improve practical applications and deepen insights into dynamic consumer behaviors, ultimately linking sentiments to their thematic drivers.
Methods
The proposed research methodology outlines a systematic approach for analyzing the behavior of digital consumers by examining the textual content of user-generated reviews. The primary objective is to extract actionable insights related to sentiment, intent, and underlying thematic patterns within the reviews. To achieve this, the researchers developed a structured analytical pipeline that integrates Natural Language Processing (NLP), Machine Learning (ML), Deep Learning (DL), and Explainable Artificial Intelligence (XAI) techniques. A framework diagram illustrating this methodology is presented in Figure 1, emphasizing the interconnectedness of the various analytical components employed in the study.
Results
The results of the study reveal a significant positive bias in consumer reviews, with 67.8% of reviews rated 5 stars, indicating high satisfaction levels. However, the presence of 1-star to 4-star reviews suggests a notable portion of dissatisfied or neutral customers, warranting further investigation. Sentiment analysis shows a clear correlation between star ratings and positive emotions, while neutrality in sentiment does not vary significantly across ratings, indicating a less biased response. The analysis of review length indicates that positive and negative reviews tend to be shorter, reflecting concise feedback, whereas neutral reviews are more descriptive. Temporal analysis of review submissions shows a right-skewed distribution, suggesting that most reviews cluster around recent product releases or marketing efforts.
The study employs advanced sentiment classification models, particularly the RoBERTa-Large model, which achieves an impressive accuracy of 93.59%. This model outperforms traditional machine learning methods and other deep learning architectures by effectively capturing complex semantic relationships in consumer feedback. Statistical significance testing confirms the robustness of the RoBERTa-Large model, demonstrating its superior ability to learn contextual semantics compared to baseline models. The integration of topic modeling and interpretability mechanisms like SHAP and LIME enhances both the performance and transparency of the model, allowing for a nuanced understanding of consumer sentiment. Overall, the findings underscore the potential of large pretrained language models in advancing sentiment analysis within the digital consumer landscape.
Discussion
The discussion section of the research paper highlights recent advancements in digital consumer behavior analysis, particularly through the application of deep learning techniques for sentiment classification and topic modeling. It notes that while deep learning models such as LSTM, CNN, and BiGRU have achieved high accuracy in sentiment classification—e.g., a hybrid BiGRU-LSTM model reached 93.9% accuracy on Amazon reviews—traditional machine learning models like Random Forest and Logistic Regression can perform comparably, especially on structured data. The section emphasizes the limitations of deep learning, including overfitting and complexity, particularly in small datasets. Transformer-based models, such as BERT and RoBERTa, have shown superior performance in sentiment analysis but require extensive computational resources and may lack interpretability.
The paper proposes an integrated analytical framework that combines RoBERTa for sentiment classification with Latent Dirichlet Allocation (LDA) for topic modeling, enhancing both predictive accuracy and interpretability. This framework utilizes SHAP and LIME for explainability, allowing for a nuanced understanding of consumer sentiment and behavior. The findings indicate that consumers express emotions differently across platforms, with Amazon reviews focusing on product attributes while Yelp reviews emphasize experiential factors. The model’s ability to capture these distinctions suggests a robust understanding of consumer sentiment dynamics, reinforcing the importance of contextual and semantic analysis in digital consumer behavior research. Overall, the study underscores the potential of hybrid models to provide deeper insights into consumer sentiment while addressing challenges related to generalization and interpretability.
