แก้ไขรหัส v1.5 3b
รูปแบบภาษาการสร้างรหัสใหม่
เด่น
96 โหวต
คำอธิบาย
การแก้ไขรหัส v1.5 เป็นรูปแบบภาษาที่เป็นสาเหตุของพารามิเตอร์ 3.3B ที่เน้นการกรอกรหัสโมเดลได้รับการฝึกฝนใน Bfloat16 บนโทเค็น 1T ของรหัส (โทเค็น ~ 200b มากกว่า 5 ยุครวมถึง Cooldown เชิงเส้น) สำหรับ 30 ภาษาการเขียนโปรแกรม