Jeśli jesteś na ICML i interesujesz się RL lub wielojęzycznością, przywitaj się z @marafinkels! Pracowaliśmy blisko przez ostatnie kilka miesięcy, aby wdrożyć metodę RL, która rozwiązuje krytyczny problem jakości Gemini. Ma również świetne pomysły badawcze! Mam nadzieję, że Gemini x akademia pozostaną w kontakcie.
Mara Finkelstein
Mara Finkelstein27 lis 2024
LLMs are typically evaluated w/ automatic metrics on standard test sets, but metrics + test sets are developed independently. This raises a crucial question: Can we design automatic metrics specifically to excel on the test sets we prioritize? Answer: Yes!
5,86K