الأبحاث ضمن الموضوع الرئيسي: التعرف على العواطف والمزاج
-
التعرف على المشاعر متعددة الأنماط في المحادثة استنادًا إلى التعلم المدفوع بميزات دمج النص والصوت
Multi-modal emotion recognition in conversation based on prompt learning with text-audio fusion featuresتقدم ورقة البحث طريقة MERC-PLTAF، التي تعزز التعرف على العواطف في المحادثات (ERC) من خلال استخدام نهج متعدد الوسائط يدمج ميزات النص والصوت. تعالج هذه الطريقة التحديات التي تطرحها حواجز اللغة وقيود الأنظمة ذات الوسائط الواحدة من خلال استخراج الميزات بشكل مُحسن واستراتيجية دمج متطورة. تظهر التحقق الواسع على مجموعات بيانات باللغة الإنجليزية والصينية أن…
-
CF-DAN: التعرف على تعبيرات الوجه استنادًا إلى شبكة الانتباه المزدوجة المتقاطعة
CF-DAN: Facial-expression recognition based on cross-fusion dual-attention networkتقدم ورقة البحث شبكة جديدة مزدوجة الانتباه مع دمج متقاطع تهدف إلى تعزيز التعرف على تعبيرات الوجه (FER) في بيئات معقدة، مثل الصور الملتقطة في البرية، والتي غالبًا ما تعاني من مشاكل مثل حجب الوجه والتمويه. تتكون الشبكة المقترحة من ثلاثة مكونات رئيسية: آلية انتباه مزدوج مع دمج متقاطع لمجموعة لتحسين الميزات المحلية أثناء التقاط…
-
ترميز المعلومات العاطفية متعددة الأنماط من خلال واجهة وجه لاسلكية مدمجة في الجلد مخصصة
Encoding of multi-modal emotional information via personalized skin-integrated wireless facial interfaceيتناول القسم تطوير نظام متعدد الوسائط للتعرف على المشاعر البشرية يدمج بين بيانات التعبير اللفظي وغير اللفظي لتعزيز التفاعل بين الإنسان والآلة. يستخدم هذا النظام واجهة وجه مدمجة في الجلد مخصصة (PSiFI)، والتي تتميز بتصميمها القابل للتمدد والشفاف والمزود بالطاقة الذاتية، مع وجود مستشعر للضغط والاهتزاز الكهربائي ثنائي الاتجاه. يسمح هذا المستشعر المبتكر بالتقاط بيانات…