VMLU (درک زبان چندوظیفهای ویتنامی) توسط Zalo AI با همکاری موسسه پیشرفته علوم و فناوری ژاپن (JAIST) توسعه داده شده است تا به جامعه تحقیق و توسعه هوش مصنوعی در ویتنام کمک کند تا ابزارهای بیشتری برای ارزیابی کیفیت خروجی مدلهای هوش مصنوعی مولد ویتنامی داشته باشند.
بر این اساس، این مجموعهای از استانداردهای ارزیابی ویتنامی است که چندوجهی و چندسطحی است و با ۱۰۸۸۰ سؤال چندگزینهای پیرامون ۵۸ موضوع مختلف، متنوعترین نیازهای بازار امروز را برآورده میکند.
چرا هوش مصنوعی ویتنام به مجموعهای کامل از استانداردهای ارزیابی مهارت زبان ویتنامی نیاز دارد؟
رشد انفجاری ChatGPT نژاد جدیدی را ایجاد کرده است: هوش مصنوعی مولد. طبق آمار، از زمان معرفی ChatGPT، در حال حاضر حدود ۱۶۰۰۰ مدل مشابه ChatGPT در جهان وجود دارد.
ویتنام نیز از این روند مستثنی نیست، چرا که گروههای تحقیقاتی زیادی با مقیاسها و پتانسیلهای مختلف وجود دارند که میخواهند هوش مصنوعی مولد را با استفاده از زبان ویتنامی آزمایش کنند. این امر منجر به نیاز به یک مجموعه ارزیابی مهارت ویتنامی برای این مدلهای هوش مصنوعی شده است تا سطح دانش و تفکر به زبان ویتنامی را اندازهگیری کند.
در بازار فعلی، اکثر گروههای تحقیقاتی LLM در ویتنام باید ابزارهای ارزیابی خود را با استانداردهای خاص خود برای مدلهایشان بسازند. اینها ابزارهای ارزیابی داخلی هستند که عمومی نشدهاند. ابزار ارزیابی Zalo AI با هدف رفع نیازهای عمومی طراحی شده است، میتواند یک استاندارد مشترک برای مدلهای LLM باشد و در اختیار جامعه هوش مصنوعی قرار گیرد. این به گروههای تحقیقاتی کوچک کمک میکند تا به مجموعه دادههای ارزیابی جامع دسترسی پیدا کنند و به طرفین اجازه میدهد تا نتایج را با یکدیگر مقایسه کنند. از آنجا، انگیزهای برای بهبود مدل ایجاد میشود.
انگیزه هوش مصنوعی ویتنامی برای پیوستن به موج هوش مصنوعی مولد جهان
در نوامبر ۲۰۲۳، Zalo AI رسماً استانداردهای ارزیابی مهارت زبان ویتنامی VMLU را اعلام کرد. این مجموعهای از استانداردها است که توسط مهندسان Zalo AI با همکاری موسسه JAIST برای ارزیابی توانایی درک و بهکارگیری زبان ویتنامی در مدلهای هوش مصنوعی، بهویژه هوش مصنوعی مولد، تحقیق و توسعه داده شده است.
تولد VMLU افراد، استارتاپها یا گروههای تحقیقاتی کوچک را به توسعه مدلهای جدید هوش مصنوعی ویتنامی ترغیب کرده است. این امر شرایطی را برای تحقیقات جدید ایجاد میکند، پایه و اساس سنجش دقت و ارتقاء نتایج مدلهای پایه را بنا مینهد و به تکمیل فرآیند توسعه برنامههای هوش مصنوعی به زبان ویتنامی که توسط مردم ویتنام برای خدمت به مردم ویتنام ایجاد شدهاند، کمک میکند.
این همچنین یکی از عوامل مهمی است که باعث میشود توسعه هوش مصنوعی مولد در ویتنام سریعتر پیش برود و با موج توسعه هوش مصنوعی در جهان همگام شود.
استانداردهای ارزیابی مهارت زبان ویتنامی چیست؟
بر این اساس، این مجموعهای از استانداردهای ارزیابی زبان ویتنامی است که چندوجهی و چندسطحی است و متنوعترین نیازها را در بازار تحقیق و توسعه هوش مصنوعی مولد ویتنام برآورده میکند و بر دو بخش اصلی تمرکز دارد: دادهها (مجموعه دادههای آزمایشی) و مجموعهای از استانداردهای ارزیابی، به عنوان مبنایی برای آزمایش مدلهای هوش مصنوعی که زبان ویتنامی را به کار میبرند.
به طور خاص، این مجموعه دادهها شامل ۱۰۸۸۰ سوال چندگزینهای حول ۵۸ موضوع مختلف است. هر موضوع حدود ۲۰۰ سوال دارد و در ۴ زمینه از جمله: STEM، علوم اجتماعی، علوم انسانی و یک دسته کلی «گسترده» توزیع شده است. با این مجموعه دادهها، VMLU طبقهبندی دشواری با ۴ سطح دارد: ابتدایی، متوسطه، دبیرستان و فنی و حرفهای - برای دانشگاه و تحصیلات تکمیلی. از آنجا، این ابزار به ارزیابی مؤثر مهارت زبان ویتنامی مدلهای هوش مصنوعی در هر دو زمینه دانش ابتدایی و حل مسائل پیچیده کمک میکند.
علاوه بر این، برای کمک به گروههای تحقیقاتی در ارزیابی آسان ظرفیت مدلهای هوش مصنوعی ویتنامی خود، تیم مهندسی هوش مصنوعی Zalo دستورالعملهای همراهی را طراحی کرده است تا گروهها بتوانند به سرعت و به سادگی از آنها استفاده کنند.
به جامعه هوش مصنوعی ویتنام کمک کنید
مجموعه استاندارد VMLU به عنوان یک محصول تحقیقاتی با هدف کمک به توسعه و پیشرفت جامعه تحقیقاتی هوش مصنوعی ویتنام به طور خاص و جامعه فناوری اطلاعات به طور کلی، بدون دریافت هزینه از هیچ کاربر، گروه تحقیقاتی یا کسب و کاری، متولد شد.
پیش از این، Zalo AI مجموعهای از مسابقات و برنامهها را برای جامعه هوش مصنوعی ویتنام پیادهسازی، مستقر و سازماندهی کرده است، مانند: چالش هوش مصنوعی Zalo، هکاتون هوش مصنوعی Zalo، اجلاس هوش مصنوعی Zalo... این فعالیتها نه تنها زمینهای برای جامعه هوش مصنوعی ویتنام ایجاد میکنند، بلکه کاربرد هوش مصنوعی را در زندگی تشویق میکنند، مشکلات اجتماعی فوری را حل میکنند و به نیازهای میلیونها ویتنامی خدمترسانی میکنند.
دکتر چائو تان دوک، رئیس بخش تحقیقات هوش مصنوعی زالو - مدرس دانشگاه علوم طبیعی، دانشگاه ملی شهر هوشی مین، تأیید کرد: «Zalo AI همیشه قصد دارد به جامعه هوش مصنوعی ویتنام کمک کند و انگیزهای برای توسعه هوش مصنوعی ویتنام ایجاد کند. از آنجا، ما انتظار داریم محصولات هوش مصنوعی بیشتری توسط مردم ویتنام، برای مردم ویتنام، تولید شود.»
منبع






نظر (0)