Granite 4.2: IBM নিজের হার্ডওয়্যারে রাখা যায় এমন এজেন্টের উপর ভরসা করছে

20 সেপ্টেম্বর 2026২২ প্রদর্শন

Granite মডেলের নতুন প্রজন্ম একসাথে দুটি ধারণা এগিয়ে নিয়ে যায়: স্বায়ত্তশাসিত এজেন্টিক পরিস্থিতি এবং কর্পোরেট পরিবেশের ভেতরে পূর্বানুমেয় স্থাপন। লোকাল LLM-এর প্রতি আগ্রহ বাড়ার প্রেক্ষাপটে এটি ব্যবসার জন্য বাহ্যিক API-এর বিকল্প প্রস্তাব করার একটি প্রচেষ্টা বলে মনে হচ্ছে — ডেটা ও অবকাঠামোর উপর নিয়ন্ত্রণসহ।

Granite 4.2: IBM নিজের হার্ডওয়্যারে রাখা যায় এমন এজেন্টের উপর ভরসা করছে

কেন IBM আদৌ এজেন্টের দিকে গেল

এন্টারপ্রাইজ গ্রাহক সুন্দর ডেমোর জন্য মডেল কেনে না। তার দরকার, সফটওয়্যার যেন কিছু কাজ করে: টিকিট বিশ্লেষণ করে, ইনভয়েস মিলিয়ে দেখে, অভ্যন্তরীণ API-তে রিকোয়েস্ট পাঠায়, ডকুমেন্টের সারসংক্ষেপ লেখে। ঠিক এই জায়গাটাই এজেন্টিক লজিক দখল করে — যখন মডেল শুধু প্রশ্নের উত্তর দেয় না, বরং নিজেই সিদ্ধান্ত নেয় পরের ধাপে কোন টুল কল করবে।

এই গল্পে Granite 4.2 কোনো "আরেকটি বড় মডেল" নয়, বরং IBM-এর একটি প্রচেষ্টা — লাইনআপটি এমনভাবে গড়ে তোলা, যাতে এটি ক্লাউডে এবং গ্রাহকের বন্ধ পরিবেশে সমান আত্মবিশ্বাসের সঙ্গে কাজ করে। ভরসা রাখা হচ্ছে তিনটি জিনিসের সমন্বয়ে: ওপেন ওয়েট, হার্ডওয়্যারের প্রতি বিনয়ী চাহিদা এবং বাহ্যিক ফাংশন কল করার সময় পূর্বানুমেয় আচরণ।

Granite লাইনআপ আসলে কী

IBM একই নামে Granite-এর অধীনে ওপেন মডেলের একটি পরিবার এক বছরের বেশি সময় ধরে চালিয়ে আসছে। এই সময়ে একটি চেনা দর্শন গড়ে উঠেছে: মডেলগুলো কয়েকটি আকারে প্রকাশিত হয়, এবং সেগুলো মূলত কোড, টেবিল নিয়ে কাজ, ডকুমেন্ট থেকে ডেটা নিষ্কাশন এবং এন্টারপ্রাইজ পরিস্থিতির দিকে লক্ষ্য রেখে তৈরি — সাধারণ চ্যাট-বেঞ্চমার্কে প্রতিযোগিতার জন্য নয়।

আকার গুরুত্বপূর্ণ

লাইনআপটি সিঁড়ির মতো সাজানো — খুব ছোট ভ্যারিয়েন্ট, যা একটি গ্রাফিক্স কার্ডে ধরে বা এমনকি প্রসেসরেও চলে, থেকে শুরু করে মাঝারি শ্রেণির মডেল পর্যন্ত। এর তাৎপর্য হলো, প্রতিটি কাজের জন্য ন্যূনতম যথেষ্ট আকার বেছে নেওয়া যায়। যে এজেন্ট মূলত রিকোয়েস্ট রাউট করে এবং ফাংশন কল করে, তার জন্য বিশাল মডেল প্রায়ই অতিরিক্ত: inference-এ বেশি খরচ এবং ধীর উত্তর।

হাইব্রিড আর্কিটেকচার

পরিবারের চতুর্থ শাখায় IBM হাইব্রিড স্কিমে গেছে, যেখানে কিছু লেয়ার Mamba-ভিত্তিক এবং কিছু ক্লাসিক ট্রান্সফরমার অ্যাটেনশন-ভিত্তিক। ব্যবহারিক লাভটি সাধারণ: দীর্ঘ কনটেক্সট সস্তায় প্রক্রিয়া হয়, মেমরি কম খরচে ব্যবহৃত হয়, এবং একই হার্ডওয়্যারে থ্রুপুট বেশি। এজেন্টিক পরিস্থিতিতে এটি জরুরি, কারণ কনটেক্সটে ক্রমাগত টুল কলের ফলাফল, ডকুমেন্টের অংশ এবং ধাপের ইতিহাস লোড হয়।

কোনো চমক ছাড়া লাইসেন্স

Granite মডেলগুলো Apache 2.0 লাইসেন্সে বিতরণ করা হয়। এন্টারপ্রাইজ আইনজীবীর কাছে এটি বিরক্তিকর খবর, আর এটাই আসলে ভালো খবর: ফাইন-টিউন করা যায়, বাণিজ্যিক পণ্যে যুক্ত করা যায়, নিজের পরিধির ভেতরে ডিপ্লয় করা যায় এবং পণ্য কত আয় করেছে তা ভেন্ডরকে জানানোর দরকার নেই।

প্রধান যুক্তি: এটি নিজের কাছে রাখা যায়

ক্লাউড API সুবিধাজনক — ঠিক ততক্ষণ, যতক্ষণ ডেটা নিয়ন্ত্রক বিধিনিষেধের আওতায় না পড়ে। একটি ব্যাংক, ক্লিনিক, শিল্প প্রতিষ্ঠান বা সরকারি সংস্থা প্রায়ই কিছু ডকুমেন্ট বাইরে পাঠাতে পারে না। এখান থেকেই "নিজের হার্ডওয়্যার" নিয়ে আলোচনা শুরু হয়।

চালু করতে আসলে কী দরকার

এখানে মূল বিষয় টপ-এন্ড অ্যাক্সিলারেটর নয়, বরং যুক্তিসঙ্গত ন্যূনতম। Granite-এর ছোট ভার্সন একটি সাধারণ গ্রাহক-মানের কার্ডে, GPU ছাড়া সার্ভারের কন্টেইনারে বা ডেভেলপারের ল্যাপটপে চলে। মাঝারি আকারের জন্য কয়েকটি কার্ড বা কোয়ান্টাইজেশন দরকার। চালু করা সাধারণত vLLM বা Ollama-এর মতো স্ট্যান্ডার্ড টুলের মাধ্যমে হয়, যা ভেন্ডরের একচেটিয়া স্ট্যাকের সঙ্গে বাঁধা পড়ার সমস্যা দূর করে।

নিরাপত্তা ও পূর্বানুমেয়তা

যুক্তির দ্বিতীয় স্তর হলো নিয়ন্ত্রণ। মডেল যখন আপনার নিজের পরিবেশে থাকে, তখন কোন লগ লেখা হবে, কোন ডেটা prompt-এ যাবে, কী ক্যাশ হবে এবং কতদিন সংরক্ষিত থাকবে — সব আপনি ঠিক করেন। এজেন্টের জন্য এটি বিশেষভাবে গুরুত্বপূর্ণ: তারা শুধু টেক্সট জেনারেট করে না, কাজও করতে পারে, এবং প্রতিটি এমন কাজ নিজের নিয়ম ও অডিটের মধ্য দিয়ে যাওয়া উচিত।

IBM এখানে শুধু মডেল নয়, পুরো সাপোর্ট স্ট্রাকচারও বিক্রি করে: watsonx প্ল্যাটফর্ম, অবাঞ্ছিত কনটেন্ট ফিল্টার করার জন্য "গার্ড" মডেলের সেট এবং নিজের ডেটায় ফাইন-টিউনের টুল। এমন স্কিমে মডেল একটি উপাদান — যদিও কেন্দ্রীয়।

এজেন্টিক পরিস্থিতি বাস্তবে কেমন দেখায়

এজেন্টের ধারণা সহজ: মডেল একটি কাজ পায়, সিদ্ধান্ত নেয় তার কোন ডেটা নেই, প্রয়োজনীয় টুল কল করে, উত্তর পড়ে এবং ফলাফলে পৌঁছানো পর্যন্ত চালিয়ে যায়। "শুধু চ্যাট" আর এজেন্টের মধ্যে পার্থক্য হলো লুপ এবং অনুমতির উপস্থিতি।

এমন মডেলগুলো সাধারণত যে ভূমিকার জন্য তৈরি হয়:

  • রাউটার। আসা অনুরোধ বিশ্লেষণ করে সিদ্ধান্ত নেয় কোন পরিস্থিতিতে পাঠাবে।
  • নিষ্কাশক। ইনভয়েস, চুক্তি, স্টেটমেন্ট থেকে ফিল্ড বের করে সেগুলো একটি কাঠামোয় সাজায়।
  • নির্বাহক। অভ্যন্তরীণ সিস্টেমের API-তে রিকোয়েস্ট পাঠায়: অনুরোধ তৈরি করে, স্ট্যাটাস আপডেট করে, ইমেইল পাঠায়।
  • রিভিউয়ার। আগের ধাপের ফলাফল যাচাই করে সিদ্ধান্ত নেয় তা গ্রহণযোগ্য কি না।

এই প্রতিটি ধাপে একটি ছোট মডেল প্রায়ই একটি বড় মডেলের চেয়ে লাভজনক: সস্তা, দ্রুত, পরীক্ষা করা সহজ এবং — যা কম গুরুত্বপূর্ণ নয় — গুণমান সন্তোষজনক না থাকলে বদলানো সহজ।

কী দেখবেন এবং সীমাবদ্ধতা কোথায়

ওপেন মডেল কোনো জাদুর ওষুধ নয়, এবং সীমাবদ্ধতা নিয়ে সৎ আলোচনা মার্কেটিংয়ের চেয়ে বেশি কাজে লাগে।

আকার বনাম যুক্তির গুণমান

ছোট মডেল সাশ্রয়ী, কিন্তু জটিল বহু-ধাপের কাজে এখনও বড় মডেলের চেয়ে পিছিয়ে। সমঝোতা সাধারণত আর্কিটেকচারালভাবে খোঁজা হয়: কয়েকটি ছোট মডেলের মধ্যে ভূমিকা ভাগ করা, কোডে ডিটারমিনিস্টিক যাচাই যোগ করা, চূড়ান্ত সিদ্ধান্তের অধিকার মানুষের কাছে রাখা।

চারপাশের ইকোসিস্টেম

ওপেন ওয়েট মানে মডেল সহজেই ফ্রেমওয়ার্কের মধ্যে স্থানান্তরযোগ্য — LangChain থেকে নিজে লেখা অর্কেস্ট্রেটর পর্যন্ত। উল্টো দিক: নির্দিষ্ট শিল্পের জন্য প্রস্তুত "বক্সড" সমাধান মালিকানাধীন প্ল্যাটফর্মের তুলনায় কম, এবং ইন্টিগ্রেশনের কিছু কাজ গ্রাহকের দলের উপর পড়ে।

হার্ডওয়্যার ও মালিকানার খরচ

নিজের হার্ডওয়্যার মানে শুধু API-তে সাশ্রয় নয়, বরং মূলধনী ব্যয়, বিদ্যুৎ, কুলিং এবং এসব রক্ষণাবেক্ষণকারী মানুষ। ছোট কোম্পানির জন্য ক্লাউড প্রায় সবসময়ই সস্তা হবে; সংবেদনশীল ডেটাসম্পন্ন বড় কোম্পানির জন্য — উল্টোটা, এবং এই সীমারেখা ভলিউমের উপর নির্ভর করে সরে যায়।

গুণমান মূল্যায়ন

প্রধান ফাঁদ হলো এজেন্টকে সাধারণ বেঞ্চমার্কে মাপা। কাজ করা এজেন্ট নিজের পরিস্থিতিতে যাচাই করা হয়: পরিচিত সঠিক উত্তরসহ বাস্তব কাজের সেট, নোংরা ইনপুট ডেটার প্রতি সহনশীলতা এবং কল করা টুল ত্রুটি ফেরত দিলে তার আচরণ। এমন সেট ছাড়া রিলিজ নোটের যেকোনো সংখ্যা শুধু রিলিজ নোটের সংখ্যাই থাকে।

এখান থেকে কী দাঁড়ায়

বাজারের বর্তমান অবস্থার প্রতি IBM-এর প্রতিক্রিয়া যুক্তিসঙ্গত দেখায়। কেউ কেউ ক্লাউডে চূড়ান্ত গুণমানের পেছনে ছুটছে, আবার কেউ সেই জায়গা পূরণ করছে যেখানে নিয়ন্ত্রণ, প্রতি টোকেনের খরচ এবং সবকিছু নিজের পরিধির ভেতরে ডিপ্লয় করার সুবিধা বেশি গুরুত্বপূর্ণ। ওপেন ওয়েট প্লাস বিনয়ী রিসোর্স চাহিদা প্লাস টুল কলের উপর জোর — ঠিক সেই সমন্বয়, যা বাইরে ডেটা পাঠানোর অনুমোদন নিয়ে ক্লান্ত এন্টারপ্রাইজ গ্রাহকের দরকার।

মূল প্রশ্নটি এই নয়, নতুন ভার্সন সাধারণ পরীক্ষায় শীর্ষস্থানীয়দের ছাড়িয়ে যাবে কি না। প্রশ্নটি হলো, মডেলের চারপাশে একটি সঠিক এজেন্টিক কনট্যুর গড়ে তোলার মতো শৃঙ্খলা দলের আছে কি না: সীমিত অধিকার, অডিট, পরীক্ষা এবং স্পষ্ট রোলব্যাকসহ। যদি থাকে — এমন এজেন্ট নিজের হার্ডওয়্যারে রাখা একটি সম্পূর্ণ কার্যকর কৌশল হয়ে ওঠে, কোনো সমঝোতা নয়।

সাধারণ প্রশ্নোত্তর

বিভিন্ন উপাদান

সব উপাদান
Granite 4.2: IBM নিজের হার্ডওয়্যারে রাখা যায় এমন এজেন্টের উপর ভরসা করছে