Mistral AI เริ่มเปิดพรีวิวสาธารณะของ Mistral Large 4 โมเดลมัลติโหมดที่มีพารามิเตอร์รวม 1.05 ล้านล้านตัว ผลประเมินงานการเงินอยู่ที่ 54.68% แต่คะแนนและอันดับแตกต่างกันไปในแต่ละการทดสอบ จึงยังสรุปความเหนือกว่าโดยรวมจากเบนช์มาร์กเพียงรายการเดียวไม่ได้
Mistral AI เริ่มเปิดพรีวิวเมื่อวันที่ 6 ตุลาคม และตั้งชื่อเล่นให้โมเดลว่า “Le Chonk” จำนวนพารามิเตอร์ที่ทำงานต่อหนึ่งคำขออยู่ที่ 49,000 ล้านตัว บริษัทระบุว่าจะเปิดเผยน้ำหนักโมเดลในช่วงปลายเดือนตุลาคม
Large 4 ใช้สถาปัตยกรรม mixture-of-experts (MoE) ซึ่งเลือกผู้เชี่ยวชาญบางส่วนจากหลายโมเดลมาประมวลผล จำนวนพารามิเตอร์ทั้งหมดและจำนวนที่ทำงานต่อคำขออยู่ที่ 1.05 ล้านล้านตัวและ 49,000 ล้านตัวตามลำดับ
ในการประเมิน Finance Agent v2 ของ Vals AI รุ่น Large 4 ทำคะแนนได้ 54.68% Mistral AI ระบุว่าผลนี้สูงกว่า GPT-6 Astra การประเมินดังกล่าวเน้นงานด้านการเงิน จึงไม่ได้แสดงประสิทธิภาพในงานประเภทอื่นหรือการทำงานจริงทั้งหมด
ข้อมูลเปรียบเทียบที่ Mistral AI เผยแพร่ให้ผลแตกต่างกันตามการทดสอบ Large 4 ทำได้ 42% ใน Dense 200 ซึ่งประเมินการเชื่อมโยงตำแหน่งของข้อมูลภาพ สูงกว่า GPT-6 Astra ที่ทำได้ 41% แต่ในการประเมินการเขียนโค้ด DeepSWE ได้ 62 คะแนน ต่ำกว่า Kimi K3 ที่ได้ 68 คะแนน
วิธีประเมินและเงื่อนไขการทดสอบอาจแตกต่างกันในแต่ละเบนช์มาร์ก จึงเปรียบเทียบประสิทธิภาพของโมเดลด้วยคะแนนเพียงอย่างเดียวได้ยาก ผล Finance Agent v2 ก็เป็นคะแนนจากการประเมินงานการเงินรายการเดียว
Mistral AI ระบุว่า Large 4 เป็นโมเดลแบบเปิดน้ำหนัก โดยนักพัฒนาภายนอกสามารถดาวน์โหลดน้ำหนักโมเดลไปใช้งานหรือปรับแต่งได้ ขอบเขตและเงื่อนไขการใช้งานขึ้นอยู่กับใบอนุญาต
การเปิดพรีวิวกับการเผยแพร่น้ำหนักโมเดลเป็นคนละขั้นตอน พรีวิวเริ่มแล้ว ขณะที่บริษัทกำหนดเผยแพร่น้ำหนักโมเดลในช่วงปลายเดือนตุลาคม เงื่อนไขการเผยแพร่จริงจะตรวจสอบได้เมื่อน้ำหนักโมเดลและใบอนุญาตเปิดเผย
ตามข้อมูลของบริษัท Large 4 ฝึกด้วย GPU NVIDIA Grace Blackwell จำนวน 3,800 ตัวในศูนย์ข้อมูลของบริษัทในยุโรป Mistral AI กำหนดราคาไว้ที่ 1.36 ดอลลาร์ (ประมาณ 1,826 วอน) ต่อโทเค็นขาเข้า 1 ล้านโทเค็น และ 4.18 ดอลลาร์ (ประมาณ 5,614 วอน) ต่อโทเค็นขาออก 1 ล้านโทเค็น
ชื่อเล่น “Le Chonk” มาจากมุกเกี่ยวกับโมเดลขนาดมหึมาที่แพร่ทางออนไลน์เมื่อเดือนมิถุนายน ก่อนที่ Mistral AI จะนำมาใช้เป็นชื่อเล่นของโมเดลจริง ตามกำหนดการที่บริษัทประกาศ น้ำหนักของ Large 4 จะเปิดเผยในช่วงปลายเดือนตุลาคม
ความคิดเห็น 0