مهندس زن زالو، فناوری ویتنامی را به کنفرانس پیشرو هوش مصنوعی جهان می‌آورد.

در کنفرانس ACL 2025 در وین، اتریش - بزرگترین رویداد جهان در زمینه پردازش زبان طبیعی - تحقیق بر روی ابزاری برای ارزیابی مدل‌های زبان ویتنامی که توسط تیم مهندسی Zalo توسعه داده شده بود، توجه بسیاری از دانشمندان بین‌المللی را به خود جلب کرد.

ZNews•10/12/2025

شش سال کار با زالو به بوی تی کوک اجازه داده است تا اشتیاق خود را به هوش مصنوعی بیشتر کند. کوک از یک شغل علوم داده بلافاصله پس از فارغ‌التحصیلی، به یک مهندس ارشد هوش مصنوعی در زالو تبدیل شده است، نماینده تیم توسعه VMLU و ارائه دهنده تحقیقات در کنفرانس ACL (انجمن زبان‌شناسی محاسباتی) در وین، اتریش در تابستان 2025.

این کنفرانس، کنفرانس دانشگاهی پیشرو در زمینه پردازش زبان طبیعی محسوب می‌شود که هر ساله بیش از ۲۰۰۰ محقق را به خود جذب می‌کند. بسیاری از کارهای بنیادی در زمینه پردازش زبان طبیعی (NLP) قبل از تبدیل شدن به استانداردهای صنعتی، در اینجا ارائه شده‌اند.

کوک به یاد می‌آورد: «از همان روز اول کنفرانس، از وسعت و تبادل نظر آزاد دانشگاهی شگفت‌زده شدم.» فضای تحقیقاتی از صبح تا شب برقرار بود، با پوسترهای متعدد به نمایش گذاشته شده، بحث‌های فنی طولانی و حضور آزمایشگاه‌هایی از متا، گوگل، اپل و غیره.

از ویتنام تا وین، اتریش

مقاله تحقیقاتی بویی تی کوک با عنوان «معیارهای ACL VMLU: یک جعبه ابزار جامع برای موسسات آموزش عالی با مسئولیت محدود ویتنامی» با هدف پرداختن به کمبود ابزارهای ارزیابی برای مدل‌های زبانی ویتنامی در مقیاس بزرگ منتشر شده است.

VMLU که در نوامبر ۲۰۲۳ توسط Zalo AI و موسسه پیشرفته علوم و فناوری ژاپن (JAIST) راه‌اندازی شد، مجموعه‌ای مشترک از استانداردها را برای کمک به توسعه‌دهندگان مدل زبانی (LLM) در مقیاس بزرگ که کاربران ویتنامی را هدف قرار می‌دهند، ارائه کرده است تا استراتژی‌های آموزشی مناسب را برای مدل‌های خود ارزیابی و توسعه دهند.

بویی کوک اظهار داشت که در طول توسعه VMLU، اعضا با چالش‌های متعددی روبرو بودند، از ساخت معیارها گرفته تا تضمین کیفیت داده‌ها. با این حال، استرس‌زاترین مرحله، فرآیند ارسال تحقیق بود. نرخ پذیرش تحقیقات در ACL تنها حدود ۲۵٪ است و آنها مجبور بودند با بسیاری از مؤسسات تحقیقاتی بزرگ هوش مصنوعی در سراسر جهان رقابت کنند.

کوک به یاد می‌آورد: «وقتی نتایج را در سطح کنفرانس بوردرلاین دریافت کردیم - به این معنی که یافته‌ها پذیرفته شدند - کل تیم بیش از حد انتظار خوشحال بودند. پس از آن، من تمام بازخوردها را از هیئت بررسی جمع‌آوری کردم، آن را با مدیر مستقیمم در میان گذاشتم و در نهایت داوران را متقاعد کردم که امتیاز را افزایش دهند تا مقاله تحقیقاتی در کنفرانس اصلی پذیرفته شود.»

خانم بویی تی کوک، نماینده تیم توسعه VMLU، این پروژه تحقیقاتی را در کنفرانس ACL ارائه داد.

این اولین معیاری است که برای ارزیابی توانایی درک زبان ویتنامی در مدل‌های زبانی بزرگ طراحی شده است. این معیار شامل چهار مجموعه داده با ۱۷۰۰۰ سوال برای ارزیابی توانایی‌ها در: دانش عمومی، درک مطلب، استدلال و گفتگو است.

به گفته مهندسان زالو، اکثر معیارهای فعلی برای زبان انگلیسی طراحی شده‌اند که به طور کامل منعکس کننده بافت نحوی، معنایی و فرهنگی ویتنامی نیست. ترجمه مستقیم مجموعه سوالات انگلیسی به ویتنامی اغلب منجر به عدم دقت یا از بین رفتن ظرافت‌های معنایی می‌شود.

برای توضیح چارچوب ارزیابی LLM به زبان ساده، هوش مصنوعی را به عنوان دانش‌آموزی تصور کنید که برای سنجش توانایی‌های خود به امتحان نیاز دارد. در حال حاضر، اکثر امتحانات به زبان انگلیسی هستند، اما تیم هوش مصنوعی Zalo می‌خواست امتحانی به زبان ویتنامی ایجاد کند تا بررسی کند که آیا هوش مصنوعی واقعاً زبان ویتنامی را به خوبی می‌فهمد و استفاده می‌کند یا خیر.

آقای نگوین ترونگ سون، مدیر علوم در Zalo AI، تأیید کرد: «سیستم ارزیابی VMLU یک «معیار» مشترک برای ارزیابی مدل‌های زبان ویتنامی در مقیاس بزرگ ارائه می‌دهد. پس از انتشار آن، بازخوردهای مثبت زیادی از جامعه تحقیقاتی هوش مصنوعی، چه در داخل و چه در سطح بین‌المللی، دریافت کردیم. در آینده، انتظار دارم VMLU به یک استاندارد ارزیابی پرکاربرد و گسترده، نه تنها در جامعه دانشگاهی، بلکه در کسب‌وکارهایی که محصولات هوش مصنوعی توسعه می‌دهند، تبدیل شود.»

اعمال هوش مصنوعی در محصولات زالو.

فراتر از ارزش آکادمیک، VMLU کاربردهای بالقوه زیادی در توسعه محصولات هوش مصنوعی در Zalo دارد.

به گفته کوک، اولاً، این معیار به ارزیابی دقت و درک زبان مدل‌های مورد استفاده در محصول Kiki Info، یک دستیار شهروند دیجیتال، کمک می‌کند. این به تیم اجازه می‌دهد تا محدودیت‌های مدل را در مهارت‌های خاص شناسایی کند.

دوم اینکه، VMLU به عنوان یک ابزار آزمایشی قبل از استقرار ویژگی‌های جدید هوش مصنوعی، مانند خلاصه‌سازی پیام، پیشنهاد پاسخ خودکار یا پشتیبانی خدمات مشتری، استفاده می‌شود.

در نهایت، VMLU با قابلیت‌های ارزیابی مکالمه‌ای خود، به Zalo کمک می‌کند تا چت‌بات‌های سازمانی را با ارتباطات طبیعی و مطابق با فرهنگ ارتباطی ویتنامی توسعه دهد.

کوک گفت: «بزرگترین هدف ما ایجاد مدل‌های هوش مصنوعی است که زبان ویتنامی را به طور طبیعی و دقیق درک کنند.»

این مهندس زن جوان امیدوار است که VMLU به گسترش خود ادامه دهد.

این مهندس جوان که از وین بازگشته است، امیدوار است که VMLU به گسترش خود ادامه دهد و به بستری برای بسیاری از گروه‌های تحقیقاتی داخلی تبدیل شود تا مدل‌ها را به شیوه‌ای یکپارچه مقایسه و ارزیابی کنند.

«امیدوارم این مجموعه داده‌ها نقطه شروعی برای توسعه قوی‌تر جامعه هوش مصنوعی ویتنام در سال‌های آینده باشد. ما می‌خواهیم سهم کوچکی در تبدیل ویتنامی به زبانی داشته باشیم که مدل‌های جهانی هوش مصنوعی آن را به درستی درک و به طور مؤثر پردازش کنند.»