basics

Todo lançamento de um novo modelo vem com algo parecido com um boletim: conjuntos padronizados de problemas de matemática, código e conhecimento usados para pontuar e comparar modelos.

Como se chamam?

Q: Como se chamam?

Benchmarks. Benchmarks são conjuntos de teste padrão para comparar modelos. Controvérsias recorrentes: perguntas de teste que vazam para os dados de treinamento ('contaminação') e a diferença entre pontuações e a sensação real de uso.

Benchmarks ✓
Bookmarks
Watermarks

Benchmarks
Benchmarks são conjuntos de teste padrão para comparar modelos. Controvérsias recorrentes: perguntas de teste que vazam para os dados de treinamento ('contaminação') e a diferença entre pontuações e a sensação real de uso.

▶ Quration AIQ

basics

Qual é o termo abrangente?Como esses pedaços são chamados?Quando dizem que um modelo de IA tem '70 bilhões de parâmetros', o que exatamente estão contando?Como se chama esse fenômeno?Qual era o nome?Como se chama essa etapa de treinamento com feedback humano?Como se chama esse limite?O Llama, o carro-chefe desses modelos 'de peso aberto', foi lançado por qual empresa?Como chamamos os modelos que lidam com múltiplas formas de entrada e saída?O que esses 'modelos de raciocínio' fazem durante essa pausa?Como se chama essa abordagem?Essa técnica toma seu nome do refino de destilados. Qual é?

Quration — Quration AIQ