Back to top
  • 공유 แชร์
  • 인쇄 พิมพ์
  • 글자크기 ขนาดตัวอักษร
ลิงก์ถูกคัดลอกแล้ว

AIเอเจนต์ใช้ผลจากข้อเสนอที่ไม่ผ่านเพื่อพัฒนาประสิทธิภาพ

มีการเสนอวิธีให้ AI เอเจนต์นำผลจากข้อเสนอแก้ไขที่ไม่ได้รับเลือกไปใช้ในการพัฒนาครั้งต่อไป โดย HMED ซึ่งทีมวิจัยพัฒนาขึ้น ทำคะแนนประสิทธิภาพเฉลี่ยในการทำงานรอบถัดไปสูงกว่าวิธีเปรียบเทียบทั้ง 6 การทดลองที่ใช้โมเดล 2 รุ่นกับโจทย์ประเมิน 3 ประเภท

นักวิจัยจากมหาวิทยาลัยชิงหัว มหาวิทยาลัยเซี่ยงไฮ้เจียวทง และสถาบันวิจัยนวัตกรรมเซี่ยงไฮ้ เผยแพร่บทความ “Learning from Revision Outcomes: Post-hoc Meta-Experience Distillation for Self-Improving Agents” บน arXiv เมื่อวันที่ 6 ตุลาคม คำว่า “Meta” ในบทความหมายถึง ‘ทักษะเมตา’ ที่เอเจนต์ใช้จัดการวิธีพัฒนาตัวเอง ไม่ได้หมายถึงบริษัท Meta

ความสามารถที่เอเจนต์ใช้ทำโจทย์โดยตรงเรียกว่า ‘ทักษะงาน’ ส่วนขั้นตอนค้นหาและปรับปรุงความสามารถเหล่านั้นเรียกว่า ‘ทักษะเมตา’ หากพิจารณาเฉพาะผลลัพธ์สุดท้ายของการปรับปรุง ก็ยากที่จะแยกว่าผลงานดีขึ้นเพราะเงื่อนไขเริ่มต้นที่เหมาะสม หรือเพราะขั้นตอนการแก้ไข

HMED กู้คืนสถานะเดิมก่อนที่ทักษะเมตาจะถูกปรับ แล้วทดลองใช้วิธีทั้งก่อนและหลังการแก้ไขเพื่อเปรียบเทียบผล ข้อมูลเปรียบเทียบจะถูกบันทึกเป็น ‘ประสบการณ์เมตา’ และส่งต่อไปยังกระบวนการแก้ไขครั้งถัดไป แม้ข้อเสนอจะไม่ได้รับเลือก ข้อมูลว่ากระบวนการค้นหาและความสามารถที่ค้นพบเปลี่ยนไปอย่างไรก็ยังนำไปใช้พัฒนาต่อได้

ทีมวิจัยทดสอบโมเดล Qwen3-32B และ DeepSeek-v4-Flash กับโจทย์ 3 ประเภท ได้แก่ ALFWorld, ScienceWorld และ BiomniBench-DA บทความระบุว่า HMED มีประสิทธิภาพเฉลี่ยในการทำงานรอบถัดไปสูงกว่าวิธีเปรียบเทียบในทั้ง 6 การตั้งค่าที่เกิดจากการจับคู่โมเดล 2 รุ่นกับโจทย์ 3 ประเภท

อัตราความสำเร็จของ Qwen3-32B ใน ALFWorld เพิ่มจาก 51.49% ด้วย MetaSkill-Evolve ซึ่งเป็นวิธีวิวัฒนาการทักษะเมตาเดิม เป็น 54.11% ด้วย HMED ส่วนอัตราความสำเร็จใน ScienceWorld เพิ่มจาก 20.84% เป็น 22.56% ขณะที่คะแนน BiomniBench-DA ซึ่งเป็นโจทย์วิเคราะห์ชีวการแพทย์ เพิ่มจาก 17.80 เป็น 20.78 คะแนน จากเต็ม 100

ทีมวิจัยยังทดลองเปรียบเทียบโดยตัดขั้นตอนส่งผลการแก้ไขไปยังการอัปเดตครั้งถัดไปออก ใน ALFWorld การตั้งค่านี้มีอัตราความสำเร็จ 49.25% ต่ำกว่า HMED แบบเต็มซึ่งอยู่ที่ 54.11% อยู่ 4.86 จุดเปอร์เซ็นต์ ทีมวิจัยระบุว่าการส่งต่อผลการแก้ไขไปใช้ในการพัฒนาครั้งถัดไปมีส่วนต่อความแตกต่างของผลการทดลองนี้

งานวิจัยนี้ประเมินขั้นตอนการพัฒนาของเอเจนต์ผ่านเบนช์มาร์ก แต่ไม่ได้รายงานผลการวัดประสิทธิภาพของเอเจนต์ซื้อขายสินทรัพย์ดิจิทัลหรือบริการที่ใช้งานจริง

ก่อนหน้านี้มีกรณีศึกษาของ Perplexity ที่นำความพยายามที่ล้มเหลวและรายละเอียดการแก้ไขมาใช้ในการเรียนรู้เพื่อลดอัตราการเรียกใช้เครื่องมือล้มเหลว งานวิจัยของ Perplexity และบทความฉบับนี้มีแนวคิดร่วมกันในการนำข้อมูลจากความล้มเหลวไปใช้พัฒนาครั้งถัดไป อย่างไรก็ตาม งานวิจัยฉบับนี้มุ่งศึกษาวิธีเปรียบเทียบทักษะเมตาก่อนและหลังการแก้ไขจากสถานะเดียวกัน

<ลิขสิทธิ์ ⓒ TokenPost ห้ามเผยแพร่หรือแจกจ่ายซ้ำโดยไม่ได้รับอนุญาต>

บทความที่มีคนดูมากที่สุด

บทความที่เกี่ยวข้อง

ความคิดเห็น 0

ข้อแนะนำสำหรับความคิดเห็น

ขอบคุณสำหรับบทความดี ๆ ต้องการบทความติดตามเพิ่มเติม เป็นการวิเคราะห์ที่ยอดเยี่ยม

0/1000

ข้อแนะนำสำหรับความคิดเห็น

ขอบคุณสำหรับบทความดี ๆ ต้องการบทความติดตามเพิ่มเติม เป็นการวิเคราะห์ที่ยอดเยี่ยม
1