Hoe heten AI-modellen die meerdere invoertypes tegelijk verwerken?

Een multimodaal model is een AI-systeem dat is gebouwd om meer dan één type invoer te verwerken en te begrijpen, zoals tekst, afbeeldingen, audio en video, binnen één verenigd systeem, in plaats van beperkt te zijn tot geschreven taal zoals eerdere chatbots dat waren. Hierdoor kun je het een foto tonen en ernaar vragen, een audiofragment afspelen, of een grafiek delen, en krijg je een zinvolle reactie doordat het verbanden legt tussen die verschillende soorten informatie.

Open-weight-modellen zijn AI-modellen waarvan de interne parameters openbaar zijn vrijgegeven zodat iedereen ze kan downloaden en gebruiken, een ander concept dat gaat over toegang en licenties in plaats van welke invoertypes een model kan verwerken. Offline modellen draaien simpelweg zonder internetverbinding nodig te hebben, een ander los kenmerk zonder verband met het verwerken van meerdere formaten.

Deze vermenging van invoertypes is wat moderne AI-assistenten in staat stelt om te beschrijven wat er op een foto gebeurt, een grafiek samen te vatten, of gesproken vragen over een video te beantwoorden, mogelijkheden waarvoor slechts enkele jaren geleden nog volledig aparte, gespecialiseerde systemen nodig zouden zijn geweest.