উন্নত এলএলএম বিকাশের জন্য জালো এআই এবং জেআইএসটি ইনস্টিটিউট সম্প্রদায়ের সাথে হাত মিলিয়েছে

জালো এআই এবং জাপান অ্যাডভান্সড ইনস্টিটিউট অফ সায়েন্স অ্যান্ড টেকনোলজি (জেএআইএসটি) সম্প্রতি এলএলএম-এর যুক্তি এবং মিথস্ক্রিয়া দক্ষতা মূল্যায়নের জন্য একগুচ্ছ মান ঘোষণা করেছে, যা ভিয়েতনামী এআই সম্প্রদায়ের সাথে উচ্চ-স্তরের এলএলএম মডেলগুলি নিখুঁত করার ক্ষেত্রে সহায়তা করবে।

কৃত্রিম বুদ্ধিমত্তা (AI) বিস্ফোরকভাবে বিকশিত হচ্ছে এবং AI মডেল গবেষণায় গুরুত্বপূর্ণ অগ্রগতির জন্য অভূতপূর্ব সুযোগগুলি উন্মুক্ত করছে, যা অ্যাপ্লিকেশনগুলিকে প্রচার করার পাশাপাশি ব্যবহারিক চাহিদা পূরণের জন্য পণ্য বিকাশের ভিত্তি তৈরি করছে। ভিয়েতনামে, ChatGPT-এর শক্তিশালী বিকাশের ঠিক পরে, যা বিশ্বব্যাপী অনুরূপ AI মডেলের একটি সিরিজের জন্ম দেয়, বিভিন্ন স্কেল এবং সম্ভাবনা সহ দেশীয় গবেষণা গোষ্ঠীগুলি ভিয়েতনামী বৃহৎ ভাষা মডেল (LLM) তৈরি করে দৌড়ে যোগ দিয়েছে।

ভিয়েতনামী এলএলএম মডেলের বিস্তারের জন্য ডেভেলপারদের উপযুক্ত প্রশিক্ষণ কৌশল অর্জনের জন্য মডেলের মান পরিমাপ করতে সাহায্য করার জন্য সাধারণ মূল্যায়ন মানদণ্ডের একটি সেট প্রয়োজন।

প্ল্যাটফর্ম ডেভেলপার জালো এআই-এর বৈজ্ঞানিক পরিচালক ডঃ নগুয়েন ট্রুং সন ভিএমএলইউ ভিয়েতনামী এলএলএম-এর মূল্যায়ন করেছেন: "বিশ্বের তুলনায় ভিয়েতনামের বাজারে মান মূল্যায়নের মান কম।"

VMLU LLM মূল্যায়ন প্ল্যাটফর্মটি জালো এআই এবং জাপান অ্যাডভান্সড ইনস্টিটিউট অফ সায়েন্স অ্যান্ড টেকনোলজি (JAIST) দ্বারা তৈরি করা হয়েছে।

ডঃ নগুয়েন ট্রুং সনের মতে, এই বাস্তবতার জন্য ভিয়েতনামী এআই সম্প্রদায়কে একত্রিত হয়ে সাধারণ মান তৈরি করতে হবে যাতে ভিয়েতনামী এআই মডেলগুলি সঠিকভাবে এবং পর্যাপ্তভাবে মূল্যায়ন করা যায়, যা ক্রমবর্ধমান উন্নত মানের মডেলগুলির বিকাশের জন্য একটি ভিত্তি তৈরি করে।

নতুন মানের মান উন্নয়নের প্রচার করুন

২০২৩ সালের নভেম্বরে, জালো এআই এবং জাপান অ্যাডভান্সড ইনস্টিটিউট অফ সায়েন্স অ্যান্ড টেকনোলজি (জেএআইএসটি) ভিয়েতনামী এলএলএম মডেলের মান মূল্যায়নের জন্য ভিএমএলইউ (ভিয়েতনামী মাল্টিটাস্ক ল্যাঙ্গুয়েজ আন্ডারস্ট্যান্ডিং বেঞ্চমার্ক স্যুট ফর লার্জ ল্যাঙ্গুয়েজ মডেলস) নামক একটি মানদণ্ড তৈরি এবং সম্প্রদায়কে বিনামূল্যে প্রদানের জন্য সহযোগিতা করবে। এটি "মেক ইন ভিয়েতনাম" মানদণ্ডের প্রথম সেট যা নেতৃস্থানীয় ভিয়েতনামী বিশেষজ্ঞদের একটি দল দ্বারা গবেষণা এবং সম্প্রদায়ের কাছে চালু করা হয়েছে।

নিজস্ব মানদণ্ডের সাথে নিজস্ব মূল্যায়ন সরঞ্জাম তৈরি করার পরিবর্তে, ভিয়েতনামী এলএলএম গবেষণা গোষ্ঠীগুলি একটি বিস্তৃত এবং সাধারণ মূল্যায়ন ডেটাসেট অ্যাক্সেস করতে সক্ষম হয়েছে।

VMLU স্ট্যান্ডার্ডগুলি STEM, সামাজিক বিজ্ঞান, মানবিক এবং ক্রমবর্ধমান অসুবিধার স্তর সহ সম্প্রসারণ সহ 4টি ক্ষেত্রের উপর দৃষ্টি নিবদ্ধ করে: প্রাথমিক, মাধ্যমিক, উচ্চ বিদ্যালয় এবং পেশাদার (স্নাতক এবং স্নাতকোত্তর)। 58টি বিষয় কভার করে 10,880টি বহুনির্বাচনী প্রশ্ন সহ, যা বিভিন্ন স্তরে বিভক্ত, 2023 সংস্করণটি LLM-এর মৌলিক জ্ঞান কার্যকরভাবে মূল্যায়ন করতে সাহায্য করেছে।

২০২৪ সালের শেষ নাগাদ, VMLU র‍্যাঙ্কিংয়ে ৪৫টি LLM প্রকাশ করেছে, ১৫৫টিরও বেশি সংস্থা এবং ব্যক্তির কাছ থেকে মূল্যায়নের অনুরোধ পেয়েছে এবং প্ল্যাটফর্ম থেকে মূল্যায়নের মানদণ্ডের ৬৯১টি ডাউনলোড এবং ৩,৭২৯টি LLM মূল্যায়নের সারসংক্ষেপ তৈরি করেছে। অনেক দেশি-বিদেশি সংস্থা VinBigData, VNPT AI, Viettel Solutions, Ho Chi Minh City University of Technology - VNU, UONLP x Ontocord - Oregon University (USA), DAMO Academy - Alibaba Group, SDSRV teams - Samsung... এর মতো VMLU মান ব্যবহার করে।

নতুন পর্যায়ে, এলএলএম মডেলগুলিকে দৃঢ়ভাবে আপগ্রেড করা হয়েছে, জটিল দক্ষতাগুলি আরও গভীরভাবে মূল্যায়ন করার জন্য মানদণ্ডের প্রয়োজন।

"এলএলএম মডেলগুলি আরও স্মার্ট হয়ে উঠছে, প্রশ্নগুলি সঠিকভাবে বুঝতে এবং উত্তর দিতে প্রায় সম্পূর্ণরূপে সক্ষম। অতএব, ডেভেলপাররা এলএলএমদের মানুষের মতোই পড়ার বোধগম্যতা, পরিকল্পনা, সংলাপ এবং যুক্তির মতো বিভিন্ন ক্ষমতা দিয়ে সজ্জিত করার উপর আরও বেশি মনোযোগ দিচ্ছেন," বলেছেন ভিএমএলইউ মূল্যায়ন সেট তৈরিতে জালো এআই-এর অংশীদার, জাপান অ্যাডভান্সড ইনস্টিটিউট অফ সায়েন্স অ্যান্ড টেকনোলজি (জেএআইএসটি) এর অধ্যাপক নগুয়েন লে মিন।

ডেভেলপারদের ক্রমবর্ধমান বৈচিত্র্যময় চাহিদার প্রতি সাড়া দিয়ে, VMLU সম্প্রতি (১) রিডিং কম্প্রিহেনশন (ViSQuAD), (২) রিজনিং (ViDrop) এবং (৩) ইন্টারঅ্যাকশন (ViDialog) সহ ৩টি দক্ষতা মূল্যায়নের জন্য একটি নতুন মানদণ্ড চালু করেছে।

VMLU 2025 মান।

ব্যক্তি এবং গবেষণা গোষ্ঠীর জন্য তাদের মডেলগুলি মূল্যায়ন করার জন্য VMLU ওয়েবসাইট https://vmlu.ai/ এ নতুন মানদণ্ড চালু করা হয়েছে।

এআই মাস্টারি সম্প্রদায়ের সাথে থাকার প্রচেষ্টা

VMLU বিশেষজ্ঞরা বলেছেন যে তারা বিভিন্ন স্তরের অসুবিধা সহ বিভিন্ন ক্ষেত্রে গবেষণা এবং আরও বৈচিত্র্যময় মূল্যায়ন সেট তৈরি চালিয়ে যাবেন যাতে বৃহৎ ভাষা মডেলগুলি আরও ব্যাপকভাবে এবং সঠিকভাবে ব্যবহারকারীদের ব্যবহারের ধরণগুলি প্রতিফলিত করে।

এছাড়াও, ভিএমএলইউ-এর লক্ষ্য হল এলএলএম মডেলের নিরাপত্তা এবং অখণ্ডতার জন্য মূল্যায়ন মানদণ্ডের একটি সেট তৈরি করা যাতে ভিয়েতনামী এলএলএমগুলি দায়িত্বশীলভাবে বিকশিত হয়।

ভিয়েতনামী জনগণের নতুন প্রযুক্তি আয়ত্ত করার ক্ষমতা এবং মনোবলকে উৎসাহিত করার জন্য, VMLU-এর মূল্যায়ন মান ভিয়েতনামী LLM গবেষণা সম্প্রদায়কে বিনামূল্যে প্রদান করা অব্যাহত থাকবে।

VMLU ওয়েবসাইটে VMLU 2025 মান আপডেট করা হয়েছে।

ভিয়েতনামে কৃত্রিম বুদ্ধিমত্তার ক্ষেত্রে অগ্রগামী হিসেবে, জালো এআই ভিয়েতনামী ব্যবহারকারীদের জন্য এআই সমাধান গবেষণা এবং বিকাশে সর্বদা সম্প্রদায়ের সাথে থাকে।

২০১৭ সাল থেকে প্রধান ভিয়েতনামী ভাষা মডেলগুলির ক্ষমতা মূল্যায়ন এবং র‍্যাঙ্কিংয়ের প্ল্যাটফর্ম ছাড়াও, জালো এআই জালো এআই চ্যালেঞ্জ এবং বার্ষিক জালো এআই সামিট ফোরামের আয়োজন করেছে। এই ইভেন্টগুলি কেবল ভিয়েতনামী এআই সম্প্রদায়কে সংযুক্ত করে না, বরং ভিয়েতনামী জনগণকে সেবা দেওয়ার জন্য ভিয়েতনামী জনগণকে এআই প্রযুক্তি পণ্য তৈরিতে অনুপ্রাণিত ও প্রচারে অবদান রাখে।

সূত্র: https://znews.vn/zalo-ai-vien-jaist-dong-hanh-cung-cong-dong-phat-trien-llm-bac-cao-post1589913.html