من السهل ضبط النماذج الصغيرة مع RL للتفوق على نماذج الأساس في المهام الرأسية. نحن مفتوح المصدر Osmosis-Apply-1.7B: نموذج صغير يدمج الكود (على غرار تطبيق المؤشر الفوري) بشكل أفضل من نماذج الأساس. روابط لتنزيل وتجربة النموذج أدناه!