Popularne tematy
#
Bonk Eco continues to show strength amid $USELESS rally
#
Pump.fun to raise $1B token sale, traders speculating on airdrop
#
Boop.Fun leading the way with a new launchpad on Solana.
Ciekawy, aby spróbować tego z diloco, nadal ustawiłbym bs=1 w wewnętrznym optymalizatorze i nadal uzyskałbym korzyści z równoległości danych.

10 lip, 22:12
🚨 Czy wiesz, że SGD z małymi partiami i bez momentu (tj. pierwszy optymalizator, o którym uczysz się w podstawach ML) jest praktycznie tak szybki jak AdamW w przypadku wstępnego szkolenia LLM na podstawie FLOP? 📜 1/n

1,87K
Najlepsze
Ranking
Ulubione