Runway เปิดตัว Praxis-1 โมเดลโลกสำหรับควบคุมหุ่นยนต์ที่เรียนรู้จากวิดีโอ

Runway บริษัทสร้างวิดีโอ เปิดตัว Praxis-1 โมเดลโลกสำหรับการเคลื่อนไหวที่นำการเรียนรู้ล่วงหน้าจากวิดีโอมาใช้ควบคุมหุ่นยนต์ โดยมีแนวคิดเพื่อลดต้นทุนและแรงงานในการเก็บข้อมูลสาธิตหุ่นยนต์ และเชื่อมโยงการเคลื่อนไหวกับฟิสิกส์ของวัตถุที่เรียนรู้จากวิดีโอเข้ากับการทำงานของหุ่นยนต์

Runway แนะนำ Praxis-1 ว่าเป็นโมเดลโลกแบบเปิดน้ำหนักผ่านโพสต์บน X เมื่อวันที่ 30 กันยายน การเปิดน้ำหนักหมายถึงการเผยแพร่ค่าน้ำหนักของโมเดล เพื่อให้ผู้ใช้ดาวน์โหลดและปรับแต่งได้ บริษัทระบุว่ามีแผนเผยแพร่ค่าน้ำหนักภายในไม่กี่เดือนข้างหน้า

การนำหุ่นยนต์ไปใช้ในสภาพแวดล้อมและงานที่หลากหลายจำเป็นต้องมีข้อมูลฝึกที่ครอบคลุมสถานการณ์ต่าง ๆ การควบคุมหุ่นยนต์จากระยะไกลเพื่อเก็บข้อมูลสาธิตมีข้อจำกัดทั้งด้านปริมาณและต้นทุน Runway มองว่าสามารถหาวิดีโอที่แสดงการเคลื่อนไหวของคนและวัตถุ รวมถึงขั้นตอนระหว่างทำงานได้มากกว่า จึงใช้การเรียนรู้ล่วงหน้าจากวิดีโอเป็นพื้นฐานของโมเดลนโยบายหุ่นยนต์

โมเดลนโยบายคือโมเดลที่ตัดสินใจว่าหุ่นยนต์ควรเคลื่อนไหวอย่างไรในสถานการณ์ที่กำหนด Runway อธิบายว่า การเรียนรู้การเคลื่อนไหวและปฏิสัมพันธ์ระหว่างวัตถุจากวิดีโอก่อน อาจนำไปใช้ให้หุ่นยนต์ทำงานจริงได้

Runway ระบุผลการทดลองของบริษัทว่า โมเดลที่เรียนรู้ล่วงหน้าจากวิดีโอบนเว็บมีค่าความคลาดเคลื่อนของตำแหน่งสุดท้าย 16.1 ซม. ส่วนโมเดลที่ฝึกจากวิดีโอของหุ่นยนต์ซึ่งควบคุมจากระยะไกลมีค่า 16.0 ซม. การประเมินครอบคลุม 93 คู่ กราฟที่บริษัทเผยแพร่ระบุว่าความแตกต่างของผลทั้งสองน้อยกว่าช่วงความคลาดเคลื่อน จึงไม่มีนัยสำคัญ

ตัวเลขดังกล่าวเป็นผลการทดลองที่ Runway นำเสนอ และแตกต่างจากตัวชี้วัดอัตราความสำเร็จโดยรวมของงานต่าง ๆ ต้นฉบับไม่ได้ระบุอัตราความสำเร็จแยกตามงานหรือผลประเมินประสิทธิภาพเชิงปริมาณอื่น

Runway ระบุเมื่อวันที่ 30 กันยายนว่า Noble Machines, Standard Bots และ Ultra กำลังทดสอบโมเดลกับฮาร์ดแวร์ที่แตกต่างกัน โดย Noble Machines ใช้กับหุ่นยนต์สองแขน Standard Bots ใช้กับแขนหุ่นยนต์ 6 แกน RO1 และ Ultra ใช้กับแพลตฟอร์มเคลื่อนที่ บริษัทกล่าวว่าจะตรวจสอบประสิทธิภาพและความปลอดภัยกับหุ่นยนต์และสภาพแวดล้อมหลายแบบก่อนเปิดเผยโมเดล

แผนเผยแพร่ค่าน้ำหนักจะช่วยให้นักพัฒนาทดลองและปรับโมเดลให้เข้ากับฮาร์ดแวร์แต่ละแบบได้ อย่างไรก็ตาม Runway ยังไม่ได้เปิดเผยขนาดโมเดล ปริมาณวิดีโอทั้งหมดที่ใช้ฝึก หรือเงื่อนไขใบอนุญาตสำหรับการใช้งานเชิงพาณิชย์

Runway อธิบาย Praxis-1 ว่าเป็นโมเดลนโยบายอเนกประสงค์สำหรับนักพัฒนาและนักวิจัยหุ่นยนต์ โดยระบุช่วงเวลาเผยแพร่ค่าน้ำหนักไว้เพียงว่า ‘ภายในไม่กี่เดือนข้างหน้า’