OpenAI heeft met de lancering van o1 onbedoeld de crypto x AI intuïtie bewezen die ik precies een jaar geleden in dit essay schreef: Een model zoals o1 heeft nu een redeneertokenbudget van 25.000 voor een enkele prompt - wat minstens een 20x toename in het gemiddelde tokenbudget per prompt vertegenwoordigt. Dit is een parallelle rekentaak, waarbij gedistribueerde en gedecentraliseerde netwerken oneindig kunnen schalen. En - de intelligentie zoals waargenomen door een gebruiker verbetert daadwerkelijk! Stel je voor dat een netwerk zoals Hyperspace groeit van de 20k+ knooppunten vandaag naar 20 miljoen knooppunten op een dag, het zou tot de top 5 AI-clusters ter wereld behoren waar je de meest intelligente antwoorden zou krijgen. En het zou ook goedkoper zijn, aangezien het een functie is van lokale elektriciteitskosten plus realtime markteconomie. Er zijn geen tussenpersonen. Zelfs micropayments tussen agenten zouden worden beheerd via een protocol dat wordt uitgevoerd door een fractie van deze knooppunten. Grote voorgetrainde modellen op kleine clusters zijn dinosaurussen in die wereld. Te traag, niet zo intelligent, zelfs als ze sommige mensen in de academische gemeenschap tevreden stellen. Wat uiteindelijk wint, zijn de grootste netwerken. Aangezien intelligentie nu een functie is van parallelle schaling van inferentie, zal bijna alle AI gedistribueerd zijn. Dit is een markt die eens in de 20 jaar voorkomt. Onze prioriteiten zijn duidelijk: we willen de meest impactvolle gedistribueerde AI-onderneming bouwen en we zullen niet afwijken van die visie. Dat werk strekt zich dus uit van nieuwe modellen, AI-producten, gedistribueerde systemen, netwerken, klanten en protocollen. We schalen met software. cc @ylecun
feedsImage
3,91K