ALTK-Evolve คว้าอันดับ 1 τ²-bench พัฒนาระบบดูแลลูกค้าโดยไม่พึ่งรุ่นท็อป

· By: SirilukP

ALTK-Evolve เรียนรู้และประยุกต์ใช้แนวทางปฏิบัติ (playbook) โดยใช้ GPT-4.o-mini ซึ่งให้ประสิทธิภาพเหนือกว่ารายการฝั่งค้าปลีก (retail) บน τ²-bench ซึ่งเป็นเบนช์มาร์กสำหรับเอเจนต์บริการลูกค้า โดยไม่ต้องอัปเดต model weights

Source: Hugging Face Blog
ดูแลงานแปลและเรียบเรียงโดย SirilukP
Mean Accuracy and Pass^4 on the held-out test tasks, by variant, for Retail and Airline. Lossless lifts retail accuracy +4.4 pp and Pass^4 +10.0 pp; airline accuracy rises +7.5 pp with lossless while sup3 gives the best Pass^4 at +10.0 pp.Cost per conversation grouped by Retail and Airline. Lossless increases cost by 65% and 32%, respectively, over the no-guideline baseline.Saved Pass^4 leaderboard comparison for Retail and Airline, highlighting ALTK-Evolve runs at 67.5% in Retail and 82.0% and 44.0% in Airline.

ความคิดเห็น (0)

เข้าสู่ระบบเพื่อร่วมแสดงความเห็น

สมัครสมาชิก

มาเป็นคนแรกที่แสดงความเห็นกันเลยโบร