Чи може модель штучного інтелекту ідеально передбачити і при цьому мати жахливу модель світу? Що б це взагалі означало? Наш новий документ ICML формалізує ці питання Один з результатів говорить про те, що трансформатор, навчений на 10 млн сонячних систем, забиває планетарні орбіти. Але це суперечить гравітаційним законам 🧵
Наша стаття має на меті відповісти на два питання: 1. У чому різниця між прогнозуванням і моделями світу? 2. Чи існують прості показники, які можуть перевірити цю відмінність? Наша стаття присвячена штучному інтелекту. Але корисно повернутися на 400 років назад, щоб відповісти на ці питання.
Мабуть, найвпливовіша модель світу починалася як модель прогнозування. До того, як у нас з'явилися закони гравітації Ньютона, у нас були передбачення Кеплера про орбіти планет. Передбачення Кеплера привели до законів Ньютона. Так що ж додав Ньютон?
1,36M