basics

Bawat bagong model launch ay dumadating na may parang report card: standardized problem sets sa math, coding, at knowledge na ginagamit para i-score at i-compare ang mga model.

Ano tawag sa mga ito?

Q: Ano tawag sa mga ito?

Benchmarks. Ang benchmarks ay standard test sets para i-compare ang mga model. Perennial controversies: ang leak ng test questions sa training data ('contamination') at ang gap sa pagitan ng scores at real-world feel.

Benchmarks ✓
Bookmarks
Watermarks

Benchmarks
Ang benchmarks ay standard test sets para i-compare ang mga model. Perennial controversies: ang leak ng test questions sa training data ('contamination') at ang gap sa pagitan ng scores at real-world feel.

▶ Quration AIQ

basics

Ano ang umbrella term?Ano tawag sa mga pirasong ito?Kapag sinabi ng mga tao na ang isang AI model ay may '70 billion parameters,' ano talaga ang binibilang nila?Ano tawag sa phenomenon na ito?Ano ang pamagat nito?Ano tawag sa human-feedback training step na ito?Ano tawag sa limitasyong ito?Ginawa ng aling kumpanya ang Llama, ang flagship ng mga 'open-weight' models na ito?Ano tawag sa mga model na kaya humawak ng iba't ibang forms ng input at output?Ano ba talaga ang ginagawa ng mga 'reasoning models' na ito sa pause?Ano tawag sa approach na ito?Ano ito?

Quration — Quration AIQ