Un modello di intelligenza artificiale può prevedere perfettamente e avere comunque un modello del mondo terribile? Cosa significherebbe anche questo? Il nostro nuovo articolo ICML formalizza queste domande. Un risultato racconta la storia: un trasformatore addestrato su 10 milioni di sistemi solari azzecca le orbite planetarie. Ma sbaglia le leggi gravitazionali 🧵

Il nostro documento mira a rispondere a due domande: 1. Qual è la differenza tra modelli di previsione e modelli del mondo? 2. Esistono metriche semplici che possono testare questa distinzione? Il nostro documento riguarda l'IA. Ma è utile tornare indietro di 400 anni per rispondere a queste domande.

Forse il modello mondiale più influente ha avuto inizio come modello predittivo. Prima che avessimo le leggi della gravità di Newton, avevamo le previsioni di Keplero sulle orbite planetarie. Le previsioni di Keplero hanno portato alle leggi di Newton. Quindi, cosa ha aggiunto Newton?