الأبحاث في مجلة: Proceedings of the 48th International ACM SIGIR Conference on Research and Development in Information Retrieval
-
المصنفون والقضاة والمساعدون: نحو فهم التفاعل بين نماذج اللغة الكبيرة في تقييم استرجاع المعلومات
Rankers, Judges, and Assistants: Towards Understanding the Interplay of LLMs in Information Retrieval Evaluation2025 | المؤلف: Krisztian Balog وآخرون | المجلة: Proceedings of the 48th International ACM SIGIR Conference on Research and Development in Information Retrieval | المجال: علم الإدارة وبحوث العمليات (Management Science and Operations Research)تستكشف هذه الورقة تأثير نماذج اللغة الكبيرة (LLMs) على استرجاع المعلومات (IR)، مع التركيز على التحيزات التي قد تنشأ من تفاعلاتها كمرتبين ومساعدين وقضاة. يقوم المؤلفون بتلخيص الأدبيات الموجودة ويقدمون تصاميم تجريبية جديدة، كاشفين أن قضاة LLM يظهرون تحيزًا كبيرًا تجاه المرتبين المعتمدين على LLM. بالإضافة إلى ذلك، يجدون قيودًا في قدرة القضاة على اكتشاف…
