Um modelo de IA pode prever perfeitamente e ainda ter um modelo de mundo terrível? O que isso significaria? O nosso novo artigo da ICML formaliza essas questões. Um resultado conta a história: Um transformer treinado em 10M de sistemas solares acerta as órbitas planetárias. Mas erra nas leis gravitacionais 🧵

O nosso artigo tem como objetivo responder a duas questões: 1. Qual é a diferença entre modelos de previsão e modelos do mundo? 2. Existem métricas diretas que podem testar esta distinção? O nosso artigo é sobre IA. Mas é útil voltar 400 anos para responder a estas questões.

Talvez o modelo mundial mais influente tenha começado como um modelo preditivo. Antes de termos as leis da gravidade de Newton, tivemos as previsões de Kepler sobre as órbitas planetárias. As previsões de Kepler levaram às leis de Newton. Então, o que Newton acrescentou?