Если вы на ICML и интересуетесь RL или многоязычностью, пожалуйста, поздоровайтесь с @marafinkels! Мы тесно работали последние несколько месяцев, чтобы разработать метод RL для решения критической проблемы качества Gemini. У нее также отличные идеи для исследований! Надеюсь, Gemini и академическое сообщество останутся на связи.
Mara Finkelstein
Mara Finkelstein27 нояб. 2024 г.
Обычно LLM оцениваются с помощью автоматических метрик на стандартных тестовых наборах, но метрики и тестовые наборы разрабатываются независимо. Это поднимает важный вопрос: можем ли мы разработать автоматические метрики, которые будут особенно эффективны на тех тестовых наборах, которые мы приоритизируем? Ответ: Да!
5,76K