一个AI模型能否完美预测,但仍然有一个糟糕的世界模型? 那究竟意味着什么? 我们新的ICML论文正式化了这些问题。 一个结果讲述了这个故事:一个在1000万个太阳系上训练的变压器准确预测了行星轨道。但它搞砸了引力法则 🧵
我们的论文旨在回答两个问题: 1. 预测模型和世界模型之间有什么区别? 2. 是否有简单的指标可以测试这种区别? 我们的论文是关于人工智能的。但回溯400年有助于回答这些问题。
也许最具影响力的世界模型起初是一个预测模型。 在我们拥有牛顿的引力定律之前,我们有开普勒对行星轨道的预测。 开普勒的预测导致了牛顿的定律。那么牛顿添加了什么呢?
1.36M