Quration AIQ

basics

ทุกครั้งที่มีการเปิดตัวโมเดลใหม่ มักจะมีสิ่งที่เหมือน 'ใบรายงานผลการเรียน' มาด้วย: ชุดโจทย์มาตรฐานด้านคณิตศาสตร์ การเขียนโค้ด และความรู้ทั่วไป ที่ใช้ให้คะแนนและเปรียบเทียบโมเดล

สิ่งเหล่านี้เรียกว่าอะไร?

Benchmarks
Benchmark คือชุดทดสอบมาตรฐานสำหรับเปรียบเทียบโมเดล ข้อโต้แย้งที่เกิดขึ้นเสมอ ๆ ได้แก่ โจทย์ทดสอบรั่วไหลเข้าไปในข้อมูลเทรน ('การปนเปื้อน') และช่องว่างระหว่างคะแนนกับความรู้สึกจริงในการใช้งาน
▶ Quration AIQ

basics

คำเรียกรวมสำหรับสิ่งนี้คืออะไร?ชิ้นเล็ก ๆ เหล่านี้เรียกว่าอะไร?เมื่อพูดถึงโมเดล AI ที่มี 'พารามิเตอร์ 7 หมื่นล้านตัว' นั่นคือการนับอะไร?ปรากฏการณ์นี้เรียกว่าอะไร?ชื่อว่าอะไร?ขั้นตอนการฝึกด้วยฟีดแบ็กของมนุษย์นี้เรียกว่าอะไร?ขีดจำกัดนี้เรียกว่าอะไร?Llama โมเดลเรือธงของกลุ่ม 'open-weight' นี้ ถูกปล่อยออกมาโดยบริษัทไหน?เราเรียกโมเดลที่รับ-ส่งข้อมูลได้หลายรูปแบบเช่นนี้ว่าอะไร?'โมเดลแนวเหตุผล' เหล่านี้ทำอะไรระหว่างที่หยุดคิดนั้น?วิธีนี้เรียกว่าอะไร?เทคนิคนี้ที่ยืมชื่อมาจากการกลั่นเหล้า เรียกว่าอะไร?

Quration — Quration AIQ