Quration Play

tech

De drie letters aan het eind van de naam ChatGPT verraden hoe het werkt: het leerde eerst van enorme hoeveelheden tekst en bouwt antwoorden op een bijzonder soort neuraal netwerk.

Waar staat de "GPT" in ChatGPT voor?

Generative Pre-trained Transformer
GPT staat voor "Generative Pre-trained Transformer": "generative" (het maakt tekst), "pre-trained" (het leerde eerst van enorme hoeveelheden data) en "Transformer" (de onderliggende neuralenetwerkarchitectuur).

GPT staat voor Generative Pre-trained Transformer: "generative" betekent dat het nieuwe tekst produceert in plaats van alleen bestaande tekst te classificeren, "pre-trained" betekent dat het eerst algemene taalpatronen leerde uit enorme hoeveelheden data voordat het verder werd afgesteld, en "Transformer" verwijst naar de neurale netwerkarchitectuur, gebouwd rond een aandachtsmechanisme, die grootschalige taalmodellering praktisch maakte.

"General Purpose Technology" en "Global Personal Tool" passen bij de letters G, P en T, maar geen van beide weerspiegelt de werkelijke betekenis achter het acroniem, dat verwijst naar de generatieve aard, trainingsmethode en architectuur van het model.

De Transformer-architectuur onder GPT werd slechts enkele jaren vóór de release van ChatGPT geïntroduceerd, en is sindsdien de basis geworden voor de overgrote meerderheid van grote taalmodellen, niet alleen die van OpenAI.

▶ Quration Play

tech

Wat maakt een "AI-agent" fundamenteel anders dan zo'n chatbot?Wat is "machine learning" (machinaal leren)?Wat betekent het dat software "open source" is?Wat is een "blockchain", eenvoudig gezegd?Wat is "de cloud" bij cloudcomputing?Een "neuraal netwerk" in AI is losjes gemodelleerd naar wat?Wat stelt een "NFT" voor?Wat is een "API" in software?Wat meet de "turingtest"?Wat is "computervisie"?Wat is "prompt engineering"?Waar staat 'LLM' voor in AI?

Quration — Quration Play