Если вы на ICML и интересуетесь RL или многоязычностью, пожалуйста, поздоровайтесь с @marafinkels! Мы тесно работали последние несколько месяцев, чтобы разработать метод RL для решения критической проблемы качества Gemini. У нее также отличные идеи для исследований! Надеюсь, Gemini и академическое сообщество останутся на связи.
Mara Finkelstein
Mara Finkelstein27 нояб. 2024 г.
LLMs are typically evaluated w/ automatic metrics on standard test sets, but metrics + test sets are developed independently. This raises a crucial question: Can we design automatic metrics specifically to excel on the test sets we prioritize? Answer: Yes!
5,86K