Thật dễ dàng để tinh chỉnh các mô hình nhỏ bằng RL để vượt trội hơn các mô hình nền tảng trong các nhiệm vụ theo chiều dọc. Chúng tôi đang mở mã nguồn Osmosis-Apply-1.7B: một mô hình nhỏ kết hợp mã (tương tự như áp dụng ngay lập tức của Cursor) tốt hơn các mô hình nền tảng. Liên kết để tải xuống và thử nghiệm mô hình bên dưới!