الأبحاث المرتبطة بالكلمة المفتاحية: قياس الانحياز
-
IssueBench: ملايين المحفزات الواقعية لقياس تحيز القضايا في مساعدة الكتابة باستخدام نماذج اللغة الكبيرة IssueBench: Millions of Realistic Prompts for Measuring Issue Bias in LLM Writing Assistance
2026 | المؤلف: Paul Röttger وآخرون | المجلة: Transactions of the Association for Computational Linguistics | المجال: أبحاث السلامة (Safety Research)تقدم الأبحاث IssueBench، وهو إطار شامل مصمم لقياس تحيز القضايا في نماذج اللغة الكبيرة (LLMs) من خلال تفاعلات المستخدمين الواقعية. يتكون من 2.49 مليون طلب باللغة الإنجليزية مستمد من 3,900 قالب و212 قضية سياسية، يهدف IssueBench إلى قياس مدى التحيز في مخرجات LLM. تكشف النتائج أن تحيز القضايا شائع ومتسق عبر عشرة نماذج LLM متطورة،…