A Qwen acabou de lançar um modelo de codificação de 480B e um espaço para experimentá-lo para desenvolvimento web. Divertido! Modelo: Espaço:

Competição de Agentes ARC-AGI-3 (faltam 27 dias) Prémio de $10K em parceria com @huggingface A sua primeira submissão está a 3 linhas de código de distância Aqui estão modelos de início rápido de @LangChainAI @AgentOpsAI e @AnthropicAI e lições aprendidas de desenvolvedores que tentaram o ARC-AGI-3 🧵

É tão estranho como a maioria das pessoas se refere a "AGI" genericamente como um monólito, como se todos fossem iguais. Não vai haver uma única AGI, ou um único tipo de AGI. Vai haver uma infinidade de variedades.

Um membro da comunidade treinou um pequeno modelo Llama (23M de parâmetros) em 3 milhões de jogos de alta qualidade do @lichess, e depois o implementou para funcionar totalmente no navegador com 🤗 Transformers.js! Super fixe! 🔥 Tem um ELO estimado de ~1400... consegues vencê-lo? 👀 (funciona tanto em dispositivos móveis como em desktop)

O que está em falta: investimento em modelos de código aberto e outras coisas para apoiar o ecossistema de pesquisa a longo prazo que fará dos EUA o lar a longo prazo da inovação em IA. Algo que o nosso país está a faltar hoje, mas que é corrigível.

O melhor modelo de IA de código aberto acaba de lançar um relatório detalhado sobre como foi treinado, um recurso raro para estudantes, dado que nenhum laboratório de fronteira está publicando! O custo total estimado do treinamento do Kimi K2 é de ~$20-30M, aproximadamente em linha com a precificação: $0.6/M em $2.5/M em tokens. 10 destaques:

Isso seria tão 🔥🔥🔥 @Alibaba_Qwen @Kimi_Moonshot

Se eu pudesse fazer um desejo hoje, desejaria que a Kimi e a Qwen liberassem os seus conjuntos de dados pós-treinamento como a Nous faz 🫣🤗 Assim, poderíamos todos construir sobre o trabalho uns dos outros de forma muito mais fácil!

Então o Qwen também recebe agora a designação de laboratório de fronteira?? @xeophon_ @Presidentlin

🏆 O nosso leaderboard de Compressão de Cache KV da @nvidia já está ativo! Compare os métodos de compressão de última geração lado a lado com o KVPress. Veja quais técnicas estão a liderar em eficiência e desempenho. 🥇