Wenn Sie auf der ICML sind und sich für RL oder Mehrsprachigkeit interessieren, sagen Sie bitte Hallo zu @marafinkels! Wir haben in den letzten Monaten eng zusammengearbeitet, um eine RL-Methode zu entwickeln, die ein kritisches Qualitätsproblem bei Gemini behebt. Sie hat auch großartige Forschungsideen! Ich hoffe, Gemini und die Akademie bleiben in Kontakt.
Mara Finkelstein
Mara Finkelstein27. Nov. 2024
LLMs werden typischerweise mit automatischen Metriken auf standardisierten Testsets bewertet, aber Metriken und Testsets werden unabhängig entwickelt. Dies wirft eine entscheidende Frage auf: Können wir automatische Metriken entwerfen, die speziell darauf ausgelegt sind, in den Testsets, die wir priorisieren, hervorragend abzuschneiden? Antwort: Ja!
5,75K