LLM কী? Token ও Context Window সহজ ভাষায় বুঝে নিন
AI চ্যাটবট নিয়ে পড়তে গেলে প্রায়ই LLM, token, context window — এই শব্দগুলো সামনে আসে। এগুলোর মানে বুঝলে আপনি AI টুল আরও দক্ষভাবে ব্যবহার করতে পারবেন।
LLM (Large Language Model) কী?
এটা এমন একটা AI মডেল, যাকে বিপুল পরিমাণ লেখা পড়িয়ে প্রশিক্ষিত করা হয়েছে, যাতে সে ভাষার প্যাটার্ন বুঝে নতুন লেখা তৈরি করতে পারে। ChatGPT-এর মতো চ্যাটবটগুলো এই ধরনের মডেলের উপর ভিত্তি করে তৈরি।
Token কী?
AI মডেল লেখাকে সরাসরি শব্দ হিসেবে না পড়ে ছোট ছোট টুকরোতে ভেঙে পড়ে, এই টুকরোগুলোকে বলে token। একটা শব্দ এক বা একাধিক token হতে পারে। মোটামুটি ধারণা হলো, শব্দ যত দীর্ঘ বা জটিল, তত বেশি token লাগে।
Context Window কী?
একটা কথোপকথনে মডেল একসাথে সর্বোচ্চ কতটুকু লেখা "মনে রাখতে" পারে, সেই সীমাকেই বলে context window। এই সীমা পার হয়ে গেলে মডেল আগের অংশ ভুলে যেতে পারে।
এটা জানা কেন কাজে লাগে
- খুব দীর্ঘ কথোপকথনে গুরুত্বপূর্ণ নির্দেশ মাঝে মাঝে আবার মনে করিয়ে দিন
- বড় ডকুমেন্ট দিলে প্রয়োজনে অংশে অংশে ভাগ করে দিন
Tags: #LLM #ContextWindow #AIBasics #LearnAI #AIModels #AITools2026
Comments
Post a Comment