Quration AIQ

basics

ভালো ছোট মডেল বানানোর একটা শর্টকাট: একটা বড় মডেলের উত্তরকে টেক্সটবুক বানিয়ে সেটা দিয়ে ছোট মডেলকে শেখানো। এই কৌশল স্পিরিট পরিশোধনের নাম থেকে ধার করা।

এটা কী?

ডিস্টিলেশন (Distillation)
ডিস্টিলেশন একটা বড় 'শিক্ষক' মডেলের ক্ষমতাকে একটা ছোট 'ছাত্র' মডেলে স্থানান্তর করে। এটাই সস্তা-কিন্তু-সক্ষম মডেলের দৌড়কে চালু রাখে — আর অন্য কোম্পানির আউটপুট থেকে ট্রেনিং করা সঠিক কিনা তা নিয়ে বিতর্ক তৈরি করে।
▶ Quration AIQ

basics

ইন্ডাস্ট্রির প্রধান একটা প্রতিক্রিয়া কী?বছরের পর বছর AI ইন্ডাস্ট্রি একটা সরল বিশ্বাসে চলেছে: 'মডেল, ডেটা আর কম্পিউট বাড়ালে পারফরম্যান্স অনুমানযোগ্যভাবে বাড়বে।' বিলিয়ন-ডলার বাজির যুক্তি এই এম্পিরিক্যাল নিয়মটাকে কী বলা হয়?টাস্ক-নির্দিষ্ট AI-এর বাইরে, মানুষের মতো সাধারণ বুদ্ধিমত্তা নিয়ে মেশিন ইনটেলিজেন্সের লক্ষ্যের সংক্ষিপ্ত নাম কী?এগুলোকে কী বলা হয়?এর ছাত্রছায়া টার্মটা কী?এই টুকরোগুলোকে কী বলা হয়?কোনো AI মডেলকে যখন '৭০ বিলিয়ন প্যারামিটার'-এর বলা হয়, তখন আসলে কী গোনা হচ্ছে?এই ঘটনাকে কী বলা হয়?পেপারটির নাম কী?এই হিউম্যান-ফিডব্যাক ট্রেনিং স্টেপটিকে কী বলা হয়?এই সীমাকে কী বলা হয়?Llama — যাকে কেউ ডাউনলোড করে নিজের সার্ভারে চালাতে পারে এমন 'ওপেন-ওয়েট' মডেলের পতাকাবাহী — কোন কোম্পানি রিলিজ করেছিল?

Quration — Quration AIQ