Det är enkelt att finjustera små modeller med RL för att överträffa grundmodeller på vertikala uppgifter. Vi använder öppen källkod för Osmosis-Apply-1.7B: en liten modell som sammanfogar kod (liknande Cursor's instant apply) bättre än foundation-modeller. Länkar för att ladda ner och prova modellen nedan!