اكتشاف العلاقة المتعمقة بين استرجاع المعلومات ونموذج RAG: كيف يؤثر ذلك على جودة النتائج؟

تمثل أنظمة توليد المحتوى المعززة باسترجاع المعلومات (RAG) نقطة تحول في معالجة البيانات المعقدة، مثل توليد التقارير. رغم أن العلاقة بين جودة الاسترجاع وفاعلية الجيل تبدو بديهية، إلا أنها لم تُدرس بشكل منهجي مسبقًا. في دراسة حديثة، تم التحقيق فيما إذا كانت مقاييس الاسترجاع يمكن أن تعمل كدلائل مبكرة موثوقة على مدى تغطية المعلومات في الردود الناتجة.

أجريت التجارب عبر معيارين نصيين لـ RAG (TREC NeuCLIR 2024 وTREC RAG 2024) ومعيار متعدد الوسائط (WikiVideo). تم تحليل 15 مجموعة استرجاع نصية و10 مجموعات استرجاع متعددة الوسائط عبر أربعة خطوط أنابيب من RAG ونماذج تقييم متعددة، مثل Auto-ARGUE وMiRAGE.

تكشف النتائج عن وجود علاقات قوية بين مقاييس الاسترجاع التي تعتمد على التغطية وتغطية المعلومات في الردود المولدة، سواء على مستوى الموضوعات أو الأنظمة. تبرز هذه العلاقة بشكل أكبر عندما تتماشى أهداف الاسترجاع مع أهداف الجيل، على الرغم من أن خطوط أنابيب RAG التكرارية الأكثر تعقيدًا يمكن أن تفصل جزئيًا بين جودة الجيل وفاعلية الاسترجاع.

توفر هذه النتائج دعمًا تجريبيًا لاستخدام مقاييس الاسترجاع كبدائل لقياس أداء أنظمة RAG، مما يفتح آفاق جديدة للبحث حول كيفية تحسين تطوير هذه الأنظمة المعقدة.