Sześć lat pracy w Zalo pozwoliło Bui Thi Cuc rozwinąć pasję do sztucznej inteligencji. Po studiach, tuż po pracy jako analityk danych, Cuc awansowała na stanowisko starszego inżyniera AI w Zalo, reprezentując zespół programistów VMLU i prezentując badania na konferencji ACL (Association for Computational Linguistics) w Wiedniu w Austrii, latem 2025 roku.

Jest to wiodąca konferencja naukowa poświęcona przetwarzaniu języka naturalnego, przyciągająca co roku ponad 2000 badaczy. Wiele fundamentalnych prac z zakresu przetwarzania języka naturalnego zostało tu zaprezentowanych, zanim stały się standardami branżowymi.

„Już od pierwszego dnia konferencji byłem pod wrażeniem jej skali i otwartej wymiany akademickiej” – wspominał Cúc. Atmosfera badawcza była niezmienna od rana do wieczora, z licznymi plakatami na wystawie, długimi dyskusjami technicznymi i obecnością laboratoriów Meta, Google, Apple i innych.

Z Wietnamu do Wiednia w Austrii

Badania Bui Thi Cuc zatytułowane ACL VMLU Benchmarks: A comprehensive benchmark toolkit for Vietnamese LLMs mają na celu rozwiązanie problemu braku narzędzi ewaluacyjnych dla modeli języka wietnamskiego na dużą skalę.

Platforma VMLU, uruchomiona w listopadzie 2023 r. przez Zalo AI i Japoński Zaawansowany Instytut Nauki i Technologii (JAIST), zapewnia wspólny zestaw standardów, które pomagają twórcom modeli językowych na dużą skalę (LLM) skierowanych do użytkowników wietnamskich w ocenie i opracowaniu odpowiednich strategii szkoleniowych dla ich modeli.

Pani Cúc stwierdziła, że ​​podczas rozwoju VMLU członkowie napotkali liczne wyzwania, od tworzenia benchmarków po zapewnienie jakości danych. Jednak najbardziej stresującym etapem był proces zgłaszania prac badawczych. Wskaźnik akceptacji prac badawczych w ACL wynosi zaledwie około 25%, a organizacja musiała konkurować z wieloma dużymi instytucjami badawczymi zajmującymi się sztuczną inteligencją na całym świecie .

„Kiedy otrzymaliśmy wyniki na poziomie konferencji Borderline – co oznaczało, że wnioski zostały zaakceptowane – cały zespół był bardziej zadowolony, niż się spodziewałem. Następnie zebrałem wszystkie opinie od komisji recenzującej, omówiłem je z moim bezpośrednim przełożonym i ostatecznie przekonałem recenzentów do podniesienia punktacji, aby praca badawcza została zaakceptowana na głównej konferencji” – wspomina Cúc.

anh 1 (3).jpg

To pierwszy test porównawczy opracowany w celu oceny zdolności rozumienia języka wietnamskiego przez duże modele językowe. Test obejmuje cztery zestawy danych z 17 000 pytań, które służą do oceny umiejętności w zakresie: wiedzy ogólnej, rozumienia tekstu czytanego, rozumowania i dialogu.

Pan Nguyen Truong Son, dyrektor ds. naukowych w Zalo AI, potwierdził: „System ewaluacji VMLU stanowi wspólną „miarę” oceny modeli języka wietnamskiego na dużą skalę. Po jego publikacji otrzymaliśmy wiele pozytywnych opinii od środowiska badawczego zajmującego się sztuczną inteligencją, zarówno w kraju, jak i za granicą. Spodziewam się, że w przyszłości VMLU stanie się szeroko stosowanym i szeroko stosowanym standardem ewaluacji, nie tylko w środowisku akademickim, ale także w firmach opracowujących produkty z zakresu sztucznej inteligencji”.

Zastosowanie sztucznej inteligencji w produktach Zalo.

Oprócz wartości akademickiej VMLU ma wiele potencjalnych zastosowań w rozwoju produktów AI w Zalo.

Według Cúca, test porównawczy pomaga przede wszystkim ocenić dokładność i rozumienie języka modeli używanych w produkcie Kiki Info, cyfrowym asystencie obywatelskim. Pozwala to zespołowi zidentyfikować ograniczenia modelu w zakresie konkretnych umiejętności.

Po drugie, VMLU jest używane jako narzędzie testowe przed wdrożeniem nowych funkcji sztucznej inteligencji, takich jak podsumowywanie wiadomości, automatyczne sugestie odpowiedzi czy obsługa klienta.

Ostatecznie, dzięki swoim możliwościom oceny konwersacji, VMLU pomaga Zalo tworzyć korporacyjne chatboty z naturalnie brzmiącą komunikacją, która jest zgodna z wietnamską kulturą komunikacyjną.

„Naszym najważniejszym celem jest stworzenie modeli sztucznej inteligencji, które będą naturalnie i dokładnie rozumieć język wietnamski” – powiedział Cúc.

zdjęcie 2.png

Po powrocie z Wiednia młody inżynier ma nadzieję, że VMLU będzie się nadal rozwijać i stanie się platformą, na której wiele krajowych grup badawczych będzie mogło porównywać i oceniać modele w ujednolicony sposób.

Mam nadzieję, że ten zbiór danych stanie się punktem wyjścia dla wietnamskiej społeczności AI, która będzie się rozwijać w nadchodzących latach. Chcemy choć w niewielkim stopniu przyczynić się do tego, aby wietnamski stał się językiem, który globalne modele AI będą poprawnie rozumieć i skutecznie przetwarzać.

anh 3.png
Szczyt Zalo AI Summit 2025, którego tematem jest „Wietnam w erze sztucznej inteligencji”, odbędzie się w sobotę 20 grudnia 2025 r. o godz. 8:00 rano na terenie kampusu VNG w strefie przetwarzania eksportowego Tan Thuan w Ho Chi Minh City.
Wydarzenie będzie transmitowane na żywo na oficjalnych kanałach informacyjnych Zalo. Oczekuje się, że weźmie w nim udział ponad 400 inżynierów zajmujących się sztuczną inteligencją.
Zarejestruj się, aby wziąć udział: https://summit.zalo.ai/

Bich Dao

Source: https://vietnamnet.vn/nu-ky-su-zalo-dua-cong-nghe-viet-toi-hoi-thao-ai-hang-dau-the-gioi-2471254.html