ক্যালিফোর্নিয়ার ইউসি বার্কলে গবেষণা প্রকল্প হিসেবে ২০২৩ সালে সূচনা করা LMArena, মঙ্গলবার ঘোষণা করেছে যে তারা সিরিজ এ পর্যায়ে ১৫০ মিলিয়ন ডলার তহবিল সংগ্রহ করেছে। এই রাউন্ডের পর কোম্পানির মোট মূল্যায়ন ১.৭ বিলিয়ন ডলার, যা তার দ্রুত বৃদ্ধির সূচক।
বিনিয়োগের নেতৃত্ব দিয়েছেন ভেঞ্চার ক্যাপিটাল ফার্ম Felicis এবং ইউসি বার্কলের নিজস্ব ফান্ড UC Investments। পূর্বে মে মাসে ১০০ মিলিয়ন ডলার সিড রাউন্ডে ৬০০ মিলিয়ন ডলারের মূল্যায়ন পেয়েছিল LMArena, ফলে সাত মাসের মধ্যে মোট ২৫০ মিলিয়ন ডলার সংগ্রহ সম্পন্ন হয়েছে।
LMArena মূলত একটি ক্রাউডসোর্সড AI মডেল পারফরম্যান্স লিডারবোর্ড হিসেবে পরিচিত। ব্যবহারকারীরা একটি প্রম্পট লিখে দুইটি মডেলে পাঠায়, তারপর কোন মডেলটি বেশি সঠিক ফলাফল দিয়েছে তা নির্বাচন করে। এই পদ্ধতি প্রতি মাসে ৫ মিলিয়নেরও বেশি ব্যবহারকারী এবং ১৫০টি দেশের ৬০ মিলিয়ন কথোপকথনের মাধ্যমে ডেটা সংগ্রহ করে।
লিডারবোর্ডে বিভিন্ন কাজের জন্য মডেলগুলো র্যাঙ্ক করা হয়, যেমন টেক্সট জেনারেশন, ওয়েব ডেভেলপমেন্ট, ভিশন, টেক্সট‑টু‑ইমেজ ইত্যাদি। OpenAI-এর GPT সিরিজ, গুগলের Gemini, Anthropic-এর Claude, Grok সহ বিভিন্ন মডেল এখানে মূল্যায়ন পায়, এবং বিশেষায়িত ইমেজ জেনারেশন বা রিজনিং মডেলগুলোও অন্তর্ভুক্ত।
প্রকল্পটি প্রথমে Chatbot Arena নামে একটি ওপেন রিসার্চ উদ্যোগ হিসেবে শুরু হয়, যার স্রষ্টা ছিলেন ইউসি বার্কলের গবেষক Anastasios Angelopoulos এবং Wei‑Lin Chiang। প্রাথমিকভাবে গ্র্যান্ট ও দান থেকে তহবিল সংগ্রহ করা হলেও, দ্রুতই এটি বাণিজ্যিক দিকের দিকে অগ্রসর হয়।
LMArena-র লিডারবোর্ড মডেল নির্মাতাদের মধ্যে জনপ্রিয় হয়ে ওঠে, ফলে কোম্পানি OpenAI, গুগল এবং Anthropic-এর মতো বড় AI সংস্থার সঙ্গে অংশীদারিত্ব গড়ে তুলেছে। এই অংশীদারিত্বের মাধ্যমে তাদের ফ্ল্যাগশিপ মডেলগুলোকে LMArena-র ব্যবহারকারী সম্প্রদায়ে পরীক্ষা করার সুযোগ দেওয়া হয়।
এপ্রিল মাসে কিছু প্রতিযোগী গবেষণা দল একটি পেপার প্রকাশ করে, যেখানে তারা দাবি করে যে LMArena-র বাণিজ্যিক অংশীদারিত্ব মডেল নির্মাতাদেরকে বেনিফিট দেয় এবং বেন্চমার্ক গেমিংয়ের সুযোগ তৈরি করে। তবে LMArena এই অভিযোগকে কঠোরভাবে অস্বীকার করেছে এবং তার মূল্যায়ন পদ্ধতিতে স্বচ্ছতা বজায় রাখার কথা পুনর্ব্যক্ত করেছে।
সেপ্টেম্বর মাসে কোম্পানি AI Evaluations নামে একটি বাণিজ্যিক সেবা চালু করে। এই সেবার মাধ্যমে এন্টারপ্রাইজ, মডেল ল্যাব এবং ডেভেলপাররা LMArena-র ব্যবহারকারী ভিত্তিক কমিউনিটিকে কাজে লাগিয়ে মডেল মূল্যায়ন অর্ডার করতে পারে। ফলে কোম্পানি সরাসরি আয় অর্জন শুরু করেছে।
AI Evaluations সেবা ব্যবহারকারী প্রতিষ্ঠানগুলোকে মডেল পারফরম্যান্সের সুনির্দিষ্ট মেট্রিক্স, ব্যবহারকারীর ফিডব্যাক এবং তুলনামূলক বিশ্লেষণ প্রদান করা হয়। এই ডেটা মডেল উন্নয়ন ও অপ্টিমাইজেশনের জন্য গুরুত্বপূর্ণ রেফারেন্স হিসেবে কাজ করে।
LMArena-র দ্রুত বৃদ্ধি এবং উচ্চ মূল্যায়ন AI ইকোসিস্টেমে ক্রাউডসোর্সড ফিডব্যাকের গুরুত্বকে তুলে ধরে। ব্যবহারকারী ভিত্তিক রেটিং সিস্টেম মডেল নির্মাতাদেরকে বাস্তব ব্যবহারিক দৃশ্যের ভিত্তিতে উন্নতি করার সুযোগ দেয়, যা ঐতিহ্যবাহী ল্যাব-ভিত্তিক টেস্টিংয়ের তুলনায় অধিক বাস্তবিক।
বিশেষজ্ঞরা উল্লেখ করেন যে, এই ধরনের প্ল্যাটফর্মগুলো ভবিষ্যতে AI মডেলের মানদণ্ড নির্ধারণে গুরুত্বপূর্ণ ভূমিকা পালন করতে পারে। ক্রমবর্ধমান মডেল সংখ্যা এবং বৈচিত্র্যের সঙ্গে, স্বচ্ছ ও ব্যবহারকারী-কেন্দ্রিক মূল্যায়ন পদ্ধতি শিল্পের মানদণ্ডকে পুনর্গঠন করতে পারে।
সারসংক্ষেপে, LMArena-র সিরিজ এ তহবিল সংগ্রহ এবং ১.৭ বিলিয়ন ডলারের মূল্যায়ন তার প্রযুক্তিগত উদ্ভাবন এবং বাজারের স্বীকৃতি উভয়ই প্রতিফলিত করে। ক্রাউডসোর্সড লিডারবোর্ড থেকে বাণিজ্যিক সেবা পর্যন্ত বিস্তৃত পোর্টফোলিও কোম্পানিটিকে AI মূল্যায়নের প্রধান খেলোয়াড় হিসেবে প্রতিষ্ঠিত করেছে।
