Entusiasmado por lançar o DailyBench! O DailyBench é um benchmark automatizado que avalia APIs de modelos de fronteira 4 vezes ao dia, baseado em um fork do HELMLite. Eu criei o DailyBench para ver se conseguíamos detectar provedores de modelos quantizando pesos, comprimindo o kv-cache ou trocando modelos durante cargas máximas.
17,66K