Quration AIQ

basics

ChatGPT जैसे लैंग्वेज मॉडल पूरे वाक्य को एक साथ नहीं पढ़ते। ये टेक्स्ट को छोटे-छोटे टुकड़ों में तोड़कर प्रोसेस करते हैं — और हिंदी टेक्स्ट अंग्रेज़ी के मुकाबले ज़्यादा टुकड़ों में बंटता है, जिससे वही पैसेज प्रोसेस करने में 'ज़्यादा खर्चीला' हो जाता है।

इन टुकड़ों को क्या कहा जाता है?

टोकन
LLM टेक्स्ट को टोकन के रूप में प्रोसेस करते हैं। भारतीय भाषाएं अक्सर अंग्रेज़ी के मुकाबले एक ही मतलब के लिए ज़्यादा टोकन लेती हैं, जिससे API प्राइसिंग और कॉन्टेक्स्ट लिमिट में नुकसान होता है।
▶ Quration AIQ

basics

जब लोग किसी AI मॉडल को '70 बिलियन पैरामीटर्स' वाला बताते हैं, तो वे असल में क्या गिन रहे होते हैं?इस घटना को क्या कहा जाता है?उसका नाम क्या था?इस ह्यूमन-फीडबैक ट्रेनिंग स्टेप को क्या कहा जाता है?इस सीमा को क्या कहा जाता है?Llama, जो 'ओपन-वेट' मॉडल्स का फ्लैगशिप है, किस कंपनी ने रिलीज़ किया?ऐसे मॉडल्स जो कई तरह के इनपुट-आउटपुट संभालते हैं, उन्हें क्या कहा जाता है?इस रुकावट के दौरान ये 'रीज़निंग मॉडल्स' असल में क्या कर रहे होते हैं?इस अप्रोच को क्या कहा जाता है?यह क्या है?इंडस्ट्री का एक बड़ा जवाब क्या है?इसे क्या कहा जाता है?

Quration — Quration AIQ