basics
ChatGPT 같은 언어모델은 문장을 통째로 읽지 않습니다. 텍스트를 잘게 쪼갠 조각 단위로 처리하는데, 한국어는 영어보다 이 조각이 더 많이 들어 같은 글도 '더 비싸게' 처리됩니다.
basics
'파라미터 700억 개 모델'처럼 AI 모델의 크기를 말할 때 쓰는 파라미터는 무엇을 가리킬까요?이 현상을 부르는 말은?비틀즈 노래 제목을 패러디한 이 논문의 제목은?사람의 피드백을 반영하는 이 후속 훈련을 뭐라고 부를까요?모델이 한 번에 기억하며 처리할 수 있는 텍스트 분량에 한도가 있기 때문인데, 이 한도를 부르는 말은?이런 '오픈 웨이트' 모델의 대표주자 라마(Llama)는 어느 회사가 공개했을까요?이렇게 여러 형태의 입력과 출력을 함께 다루는 모델을 부르는 말은?이전 모델과 달리 답을 내놓기 전에 눈에 띄게 오래 뜸을 들이는데, 이 '추론 모델'이 그 시간에 하는 일은?이런 방식을 부르는 말은?술을 정제하는 과정에서 이름을 딴 이 기법은?업계가 찾은 대응책 중 하나는?수천억 원짜리 베팅의 근거가 된 이 경험 법칙의 이름은?Quration — Quration AIQ