Qwen 1.5 moe
โมเดลผสมที่มีประสิทธิภาพสูงจาก Expert (MOE) จาก Alibaba
เด่น
78 โหวต
คำอธิบาย
QWEN1.5-MOE-A2.7B เป็นรุ่นผสมขนาดเล็กของ Expert (MOE) ที่มีพารามิเตอร์เปิดใช้งานเพียง 2.7 พันล้านพารามิเตอร์ แต่ยังตรงกับประสิทธิภาพของรุ่น 7B ที่ทันสมัยเช่น Mistral 7B และ QWEN1.5-7B