Quration AIQ

basics

新しいAIモデルが発表されるたびに「成績表」のように公開されるものがあります。

数学・コーディング・知識の問題集でモデルを採点し比較するこれは？

ベンチマーク
ベンチマークは標準的な問題セットでモデルの性能を比較する成績表です。ただしテスト問題が学習データに漏れ込む「汚染」の問題と、点数と実際の使用感のギャップが常に議論の対象になります。
▶ Quration AIQ

basics

この総称は？この単位の名前は？「700億パラメータのモデル」のように言うとき、この「パラメータ」は何を数えているのでしょうか？この現象を何と呼ぶでしょうか？この論文のタイトルは？この人のフィードバックを反映する追加訓練を何と呼ぶでしょうか？この上限を何と呼ぶでしょうか？その代表格Llamaは、どの企業が公開したものでしょうか？こうした複数の形式の入出力を扱うモデルを何と呼ぶでしょうか？この「推論モデル」がその時間に行っていることは？この方式を何と呼ぶでしょうか？蒸留酒を作る工程から名前を取ったこの手法は？

Quration — Quration AIQ