Baidu Ernie 4.5 AI মডেলের ১০টি ভেরিয়েন্ট ওপেন-সোর্স করেছে, সেইসাথে একটি মাল্টি-হার্ডওয়্যার টুলকিটও লঞ্চ করেছে, যার ফলে ডেভেলপাররা সহজেই মডেলটিকে প্রশিক্ষণ ও কাস্টমাইজ করতে পারবে।
Baidu: আর্টিফিশিয়াল ইন্টেলিজেন্স (AI)-এর ক্ষেত্রে বিশ্বব্যাপী প্রতিযোগিতা দ্রুত বাড়ছে এবং এই ধারাবাহিকতায় চীনের প্রধান টেক কোম্পানি বাইদু (Baidu) একটি বড় পদক্ষেপ নিয়ে তাদের নতুন AI মডেল Ernie 4.5 সিরিজের ১০টি ভেরিয়েন্ট ওপেন-সোর্স কমিউনিটির জন্য উপলব্ধ করেছে।
এই লঞ্চটি কেবল প্রযুক্তিগত দিক থেকেই গুরুত্বপূর্ণ নয়, বরং এটি এআই উদ্ভাবনকে গণতান্ত্রিক ও সহজলভ্য করার দিকেও একটি গুরুত্বপূর্ণ পদক্ষেপ হিসেবে বিবেচিত হচ্ছে। এর সাথে, কোম্পানিটি একটি মাল্টি-হার্ডওয়্যার সমর্থিত টুলকিট 'ErnieKit'ও প্রকাশ করেছে, যা ডেভেলপারদের মডেল প্রশিক্ষণ ও কাস্টমাইজেশনে আরও স্বাধীনতা এবং নমনীয়তা দেবে।
Ernie 4.5 সিরিজ আসলে কী?
Ernie (Enhanced Representation through Knowledge Integration) হল বাইদুর প্রধান জেনারেটিভ এআই মডেল, যা GPT-এর মতো প্রযুক্তির উপর ভিত্তি করে তৈরি করা হয়েছে। Ernie 4.5 হল এর উন্নত সংস্করণ, যা বিশেষভাবে Mixture-of-Experts (MoE) আর্কিটেকচারের সাথে ডিজাইন করা হয়েছে।
Baidu আগে ঘোষণা করেছিল যে তারা ৩১শে জুলাই, ২০২৫ তারিখে Ernie 4.5 ওপেন-সোর্স করবে, কিন্তু কোম্পানিটি ১লা জুলাই, ২০২৫-এ এটি জনসাধারণের জন্য উন্মুক্ত করে দেয়, যা বিশ্বব্যাপী এআই কমিউনিটিতে উৎসাহের সৃষ্টি করেছে।
প্রকাশিত মডেলগুলির বৈশিষ্ট্য
Ernie 4.5-এর ১০টি ভেরিয়েন্ট বিভিন্ন ক্ষমতা এবং আকারে ডিজাইন করা হয়েছে:
- ৮টি মডেল MoE (Mixture-of-Experts) প্রযুক্তির উপর ভিত্তি করে তৈরি করা হয়েছে
- ৪টি মাল্টি-মডেল মডেল রয়েছে যা ভিশন এবং ভাষা উভয়কেই প্রক্রিয়া করতে পারে
- ২টি মডেল চিন্তা ও যুক্তিবোধ (reasoning/thinking) করার ক্ষমতার জন্য তৈরি করা হয়েছে
- ৫টি মডেল পোস্ট-ট্রেন্ড, যেখানে অন্যান্যগুলি প্রি-ট্রেন্ড পর্যায়ে রয়েছে
এই সমস্ত মডেল Apache 2.0 লাইসেন্সের অধীনে লঞ্চ করা হয়েছে, যা শিক্ষাগত এবং বাণিজ্যিক উভয় ব্যবহারের অনুমতি দেয়।
প্রযুক্তিগত শক্তি: প্যারামিটার থেকে পারফর্মেন্স পর্যন্ত
Baidu এই মডেলগুলির গভীর প্রযুক্তিগত তথ্যও শেয়ার করেছে। কোম্পানির মতে:
- MoE মডেলগুলিতে মোট ৪৭ বিলিয়ন প্যারামিটার রয়েছে, তবে এক সময়ে শুধুমাত্র ৩ বিলিয়ন প্যারামিটার সক্রিয় থাকে, যা পারফর্মেন্স এবং দক্ষতার মধ্যে ভারসাম্য বজায় রাখে।
- সবচেয়ে বড় মডেলটিতে ৪২৪ বিলিয়ন প্যারামিটার রয়েছে, যা Ernie 4.5 সিরিজকে মেগাস্কেল মডেলের শ্রেণিতে স্থান দেয়।
Baidu-এর দাবি, তাদের মডেল Ernie-4.5-300B-A47B-Base, বেঞ্চমার্কিং প্ল্যাটফর্ম DeepSeek-V3-671B-A37B-Base-কে ২৮টির মধ্যে ২২টি পরীক্ষায় পরাজিত করে।
অন্য একটি তুলনামূলক বিশ্লেষণে, Ernie-4.5-21B-A3B-Base মডেল, কম প্যারামিটার থাকা সত্ত্বেও, Qwen3-30B-A3B-Base-এর চেয়ে ভালো পারফর্ম করেছে, বিশেষ করে গণিত এবং লজিক্যাল রিজনিং-এর মতো ক্ষেত্রগুলিতে।
মডেল প্রশিক্ষণের বিশেষ কৌশল
Baidu এই মডেলগুলিকে তাদের নিজস্ব PaddlePaddle ফ্রেমওয়ার্কে প্রশিক্ষণ দিয়েছে। প্রশিক্ষণের সময় বেশ কয়েকটি আধুনিক প্রযুক্তি ব্যবহার করা হয়েছে:
- অপ্রতিসম MoE গঠন (Asymmetric MoE)
- ইন্ট্রা-নোড বিশেষজ্ঞ সমান্তরালতা (Intra-node expert parallelism)
- মেমরি-দক্ষ পাইপলাইন শিডিউলিং (Memory-efficient pipeline scheduling)
- FP8 মিশ্র-নির্ভুল প্রশিক্ষণ
- সূক্ষ্ম-কণা পুনঃ-ক্লাস্টারিং অ্যালগরিদম
ErnieKit: ডেভেলপারদের জন্য অল-ইন-ওয়ান টুলকিট
শুধু মডেলই নয়, Baidu ডেভেলপারদের জন্য ErnieKit নামে একটি টুলকিটও ওপেন-সোর্স করেছে। এই টুলকিটের মাধ্যমে ব্যবহারকারীরা নিম্নলিখিত কাজগুলি করতে পারবেন:
- প্রি-ট্রেনিং এবং SFT (Supervised Fine-Tuning)
- LoRA (Low-Rank Adaptation)
- কাস্টম প্রশিক্ষণ এবং ঐচ্ছিক স্কেলিং পদ্ধতি
ErnieKit-এর একটি প্রধান বৈশিষ্ট্য হল এটি মাল্টি-হার্ডওয়্যার কনফিগারেশন সমর্থন করে, যা এটিকে লো-এন্ড থেকে হাই-এন্ড সার্ভার ক্লাস্টার পর্যন্ত ব্যবহারের জন্য উপযুক্ত করে তোলে।
বিশ্বব্যাপী ডেভেলপার এবং গবেষকদের সুবিধা হবে
Baidu-এর এই পদক্ষেপটি বিশেষ করে স্টার্টআপ, শিক্ষাবিদ, গবেষক এবং স্বাধীন ডেভেলপারদের জন্য খুবই উপযোগী হবে। Apache 2.0 লাইসেন্সের অধীনে তারা পাবে:
- সম্পূর্ণ কাস্টমাইজেশন স্বাধীনতা
- শিক্ষাগত প্রকল্পে ব্যবহারের সুবিধা
- লাইসেন্স সংক্রান্ত কোনো বাধা ছাড়াই বাণিজ্যিক অ্যাপ্লিকেশন ডেভেলপমেন্টের অনুমতি।
