إذا كنت في ICML ومهتما باللغة المنخفضة أو تعدد اللغات، فيرجى إلقاء التحية على @marafinkels! لقد عملنا عن كثب في الأشهر القليلة الماضية لشحن طريقة RL لإصلاح مشكلة جودة الجوزاء الحرجة. لديها أفكار بحثية رائعة أيضا! نأمل أن تبقى الجوزاء × الأكاديمية على اتصال.
Mara Finkelstein
Mara Finkelstein‏27 نوفمبر 2024
عادة ما يتم تقييم LLMs باستخدام المقاييس التلقائية على مجموعات الاختبار القياسية ، ولكن يتم تطوير المقاييس + مجموعات الاختبار بشكل مستقل. يثير هذا سؤالا حاسما: هل يمكننا تصميم مقاييس تلقائية على وجه التحديد للتفوق في مجموعات الاختبار التي نعطيها الأولوية؟ إجابة: نعم!
‏‎5.76‏K