basics

Miundo ya lugha kama ChatGPT haisomi sentensi zima kwa mkupuo. Inachakata maandishi yaliyokatwakatwa vipande vidogo — na maandishi ya Kikorea yanagawanyika vipande vingi zaidi kuliko Kiingereza, hivyo aya moja 'inagharimu zaidi' kuchakatwa.

Vipande hivi vinaitwaje?

Q: Vipande hivi vinaitwaje?

Tokens. LLM huchakata maandishi kama tokens. Kikorea huwa kinatumia tokens nyingi zaidi kuliko Kiingereza kwa maana ile moja, hali inayoiweka katika hasara ya bei ya API na mipaka ya context.

Tokens ✓
Pixels
Packets

Tokens
LLM huchakata maandishi kama tokens. Kikorea huwa kinatumia tokens nyingi zaidi kuliko Kiingereza kwa maana ile moja, hali inayoiweka katika hasara ya bei ya API na mipaka ya context.

▶ Quration AIQ

basics

Watu wanapoeleza modeli ya AI ina 'parameta bilioni 70,' wanahesabu nini hasa?Jambo hili linaitwaje?Iliitwa nini?Hatua hii ya mafunzo yenye maoni ya binadamu inaitwaje?Mpaka huu unaitwaje?Llama, kinara wa miundo hii ya 'open-weight,' ilitolewa na kampuni gani?Miundo inayoshughulikia aina nyingi za taarifa za kuingiza na kutoa (input/output) huitwaje?Miundo hii ya 'reasoning' inafanya nini wakati wa kusita huko?Mkabala huu unaitwaje?Ni ipi?Jibu moja kubwa la sekta ni nini?Kanuni hii ya kutokana na uzoefu — sababu ya kuwekeza mabilioni ya dola — inaitwaje?

Quration — Quration AIQ