tag: BenchMIRT

BenchMIRT: เจาะลึกความจริงเบื้องหลังคะแนน Benchmark ของ LLM

BenchMIRT: เจาะลึกความจริงเบื้องหลังคะแนน Benchmark ของ LLM

BenchMIRT เป็นเทคโนโลยีใหม่ที่ใช้ระบบ multidimensional IRT เพื่อวิเคราะห์ระดับรายข้อคำถามว่าโมเดลภาษาขนาดใหญ่ (LLM) มีทักษะด้านความปลอดภัยหรือการใช้เหตุผลจริงตามที่ชื่อ Benchmark ระบุไว้หรือไม่