Back to top
  • 공유 Share
  • 인쇄 Print
  • 글자크기 Font size
URL copied.

77.8ms: เจเวอเรชัน (Jeveration) สร้างภาพ 512×512 เร็วกว่า Janus Pro-7B 122.2 เท่าตามเงื่อนไขงานวิจัย

GPU บนแท่นทดสอบและหน้าจอภาพที่สร้างขึ้นในห้องปฏิบัติการ AI / TokenPost.ai

ทีมนักวิจัยจากมหาวิทยาลัยแห่งชาติสิงคโปร์ (National University of Singapore) เปิดเผยงานวิจัยเจเวอเรชัน (Jeveration) เมื่อวันที่ 19 ตามเวลาเกาหลี โดยรายงานว่าใช้เวลา 77.8ms ในการสร้างภาพขนาด 512×512 พิกเซล

ทีมวิจัยใช้โมเดลวิชัน-ภาษา Qwen3.5-4B ที่ตรึงพารามิเตอร์ไว้ ร่วมกับอะแดปเตอร์ LoRA แบบใช้ร่วมกันและหัวเอาต์พุตแยกตามงาน โครงสร้างนี้รองรับการสร้างภาพจากข้อความ การแปลงภาพเป็นภาพ การแบ่งส่วนภาพ การคาดการณ์ความลึก และการคาดการณ์เวกเตอร์ปกติของพื้นผิวจากเช็กพอยต์เดียว

เจเวอเรชันมองภาพเป็นการตัดสินใจร่วมของโค้ดไม่ต่อเนื่อง 128 ชุด โดยป้อนสถานะสุ่มเดียวกันเป็นเงื่อนไขในทุกตำแหน่ง เพื่อรักษาความสอดคล้องของทั้งภาพระหว่างการคาดการณ์แบบขนาน แนวทางนี้พยายามลดการสร้างโทเคนทีละลำดับของโมเดลออโตเรเกรสซีฟและการกำจัดสัญญาณรบกวนซ้ำของโมเดลดิฟฟิวชันให้เหลือการส่งผ่านไปข้างหน้าเพียงครั้งเดียว

การเปรียบเทียบความเร็วใช้ค่ามัธยฐานจากการวัด 5 ครั้งบน GPU H200 ของเอ็นวิเดีย (NVIDIA·$NVDA) หนึ่งตัว ที่ batch size 1 และรวมขั้นตอนถอดรหัส เจเวอเรชันใช้เวลา 77.8ms ในการสร้างภาพ 512px และได้คะแนน GenEval 0.74

Janus-Pro-7B สร้าง 576 โทเคนแบบออโตเรเกรสซีฟที่ความละเอียด 384px และใช้เวลา 9508.4ms ตารางในงานวิจัยคำนวณความแตกต่างของเวลาแฝงไว้ที่ 122.2 เท่า อย่างไรก็ตาม ความละเอียดและขั้นตอนการสร้างแตกต่างกัน จึงไม่อาจถือว่าตัวคูณนี้เป็นความเร็วทั่วไปของโมเดลภาพทุกชนิด

ที่ความละเอียดเดียวกัน 512px เจเวอเรชันมีเวลาแฝง 77.8ms สั้นกว่า 94.1ms ของโชว์โอ เทอร์โบ-512 (Show-o Turbo-512) และได้ GenEval 0.74 เทียบกับ 0.63 อย่างไรก็ดี เจเวอเรชันวัดจากการสร้าง 1 ครั้ง ขณะที่โชว์โอ เทอร์โบ-512 ใช้เงื่อนไขการสร้าง 4 ขั้นตอน

คะแนน DPG ซึ่งใช้ประเมินการรองรับพรอมต์ยาวของเจเวอเรชันอยู่ที่ 78.24 ต่ำกว่า 83.35 ของโชว์โอ เทอร์โบ-512 ส่วน GenEval ของเจเวอเรชันอยู่ที่ 0.74 ต่ำกว่า 0.80 ของ Janus Pro-7B ตัวเลขเหล่านี้ชี้ว่าความเร็วไม่ได้หมายถึงความเหนือกว่าในทุกตัวชี้วัดคุณภาพ

การอนุมานภาพเป็นภาพใช้เวลา 91.7ms ต่อครั้ง การประเมิน HED ความลึก และการลงสีใหม่ใช้ตัวอย่างตรวจสอบแยกงานละ 341 ตัวอย่าง ได้คะแนน 0.880, 0.802 และ 0.937 ตามลำดับ ส่วนค่า PSNR ของการแปลงสไตล์อยู่ที่ 15.40 จากคู่ข้อมูลตรวจสอบ 223 คู่

ในการคาดการณ์แบบหนาแน่นบนชุดข้อมูล NYUv2 เจเวอเรชันได้ค่า mIoU ของการแบ่งส่วนภาพ 67.7 ค่าคลาดเคลื่อนสัมบูรณ์ด้านความลึก 0.267m ค่า δ1 ที่ 0.898 และค่าคลาดเคลื่อนเฉลี่ยของเวกเตอร์ปกติพื้นผิว 24.2 องศา ค่าคลาดเคลื่อนของเวกเตอร์ปกติพื้นผิวสูงกว่า 21.2 องศาของโมเดลที่ทำงานเดี่ยว งานวิจัยเสนอว่าการรวมหลายงานอาจกระทบข้อมูลเรขาคณิตระดับท้องถิ่นที่ละเอียด

การฝึกใช้ LoRA rank-256 โดยระยะที่ 1 ฝึกประมาณ 92,000 รอบ และระยะที่ 2 ประมาณ 6,700 รอบ ใช้ GPU RTX PRO 6000 จำนวน 4 ตัวเป็นเวลาประมาณ 4 วัน ชุดข้อมูลประกอบด้วยภาพ FLUX-Reason-6M เรนเดอร์จาก Qwen-Image พรอมต์จาก text-to-image-2M และ NYUv2

คลัง GitHub อย่างเป็นทางการเผยโค้ดสำหรับการอนุมานและวิธีดาวน์โหลดน้ำหนักโมเดลขนาด 6.5GB จากฮักกิงเฟซ (Hugging Face) โค้ดและน้ำหนักของเจเวอเรชันเผยแพร่ภายใต้ใบอนุญาต Apache-2.0 การใช้งานต้องดาวน์โหลด Qwen3.5-4B, TA-TiTok และ text tower ของ CLIP แยกต่างหาก โดยองค์ประกอบจากบุคคลที่สามอยู่ภายใต้ใบอนุญาตของแต่ละโครงการ

หน้า Papers ของฮักกิงเฟซระบุให้เจเวอเรชันเป็น 'Paper of the day' ขณะที่ความคิดเห็นในโพสต์เรดดิต (Reddit) r/StableDiffusion มีทั้งผู้มองบวกต่อโครงสร้างที่รวมการสร้าง การแก้ไข และการคาดการณ์แบบหนาแน่นไว้ในโมเดลเดียว รวมถึงความเร็ว และผู้ที่ชี้ถึงภาพบิดเบี้ยวกับคุณภาพต่ำ ความคิดเห็นดังกล่าวเป็นประสบการณ์ส่วนบุคคลและไม่ใช่การตรวจสอบประสิทธิภาพอย่างเป็นทางการ

ลิโนย ชาบัน (Linoy Tsaban) วิศวกรของฮักกิงเฟซ ประเมินในโพสต์สาธารณะที่เผยแพร่ผ่านมิเรอร์ว่า ความเร็วของเจเวอเรชันสูงมาก แต่คุณภาพภาพยังห่างจากระดับสูงสุดของรุ่นล่าสุด

ก่อนหน้านี้ TokenPost เคยรายงานผลการปรับแต่งการแก้ไขภาพ FLUX 3 ของเอ็นวิเดีย แต่ผลดังกล่าวมาจากเงื่อนไขที่ลดเวลาแก้ไขภาพ 2048×2048 จาก 54.64 วินาทีเหลือ 12.28 วินาทีบน GPU B200 หนึ่งตัว เจเวอเรชันรายงานการสร้างภาพ 512×512 ใช้เวลา 77.8ms บน H200 ดังนั้น GPU ความละเอียด และประเภทงานแตกต่างกัน จึงไม่สามารถเปรียบเทียบตัวเลขทั้งสองโดยตรง

บทความวิจัยเจเวอเรชันเผยแพร่ในรูปแบบพรีพรินต์บน arXiv และยังไม่พบผลการทำซ้ำโดยอิสระนอกเหนือจากผู้เขียน งานวิจัยและคลังโค้ดอย่างเป็นทางการไม่ได้ระบุความเชื่อมโยงกับโทเคน เครือข่ายบล็อกเชน หรือธุรกิจสินทรัพย์ดิจิทัล

<Copyright ⓒ TokenPost, unauthorized reproduction and redistribution prohibited>

Most Popular

Other related articles

Comment 0

Comment tips

Great article. Requesting a follow-up. Excellent analysis.

0/1000

Comment tips

Great article. Requesting a follow-up. Excellent analysis.
1