Eine Ingenieurin von Zalo bringt vietnamesische Technologie zur weltweit führenden KI-Konferenz.

Sechs Jahre bei Zalo haben es Bui Thi Cuc ermöglicht, ihre Leidenschaft für Künstliche Intelligenz weiterzuentwickeln. Von einer Position als Data Scientist direkt nach dem Studium hat sich Cuc zur Senior AI Engineer bei Zalo entwickelt, wo sie das VMLU-Entwicklungsteam vertritt und ihre Forschungsergebnisse auf der ACL-Konferenz (Association for Computational Linguistics) im Sommer 2025 in Wien präsentiert.

Diese Konferenz gilt als führende wissenschaftliche Veranstaltung im Bereich der natürlichen Sprachverarbeitung und zieht jährlich über 2.000 Forscher an. Viele grundlegende Arbeiten zur NLP wurden hier vorgestellt, bevor sie zu Industriestandards wurden.

„Schon am ersten Tag der Konferenz war ich überwältigt von dem Ausmaß und dem offenen akademischen Austausch“, erinnerte sich Cúc. Die Forschungsatmosphäre war von morgens bis abends durchgehend präsent, mit zahlreichen Posterpräsentationen, ausführlichen Fachdiskussionen und der Anwesenheit von Laboren von Meta, Google, Apple und anderen.

Von Vietnam nach Wien, Österreich

Die Forschung von Bui Thi Cuc mit dem Titel ACL VMLU Benchmarks: A comprehensive benchmark toolkit for Vietnamese LLMs zielt darauf ab, den Mangel an Evaluierungsinstrumenten für groß angelegte vietnamesische Sprachmodelle zu beheben.

Die VMLU wurde im November 2023 von Zalo AI und dem Japan Advanced Institute of Science and Technology (JAIST) ins Leben gerufen und bietet einen gemeinsamen Satz von Standards, um Entwicklern von groß angelegten Sprachmodellen (LLM), die sich an vietnamesische Nutzer richten, bei der Bewertung und Entwicklung geeigneter Trainingsstrategien für ihre Modelle zu helfen.

Frau Cúc erklärte, dass die Mitglieder von VMLU während der Entwicklung zahlreiche Herausforderungen bewältigen mussten, von der Erstellung von Benchmarks bis zur Sicherstellung der Datenqualität. Die stressigste Phase war jedoch der Einreichungsprozess der Forschungsarbeiten. Die Annahmequote für Forschungsprojekte am ACL liegt bei nur etwa 25 %, und sie mussten sich gegen viele große KI-Forschungseinrichtungen weltweit behaupten.

„Als wir die Ergebnisse der Borderline-Konferenz erhielten – die Ergebnisse also angenommen wurden –, war das gesamte Team erfreuter als erwartet. Anschließend sammelte ich das gesamte Feedback des Gutachtergremiums, besprach es mit meinem direkten Vorgesetzten und konnte die Gutachter schließlich davon überzeugen, die Bewertung anzuheben, damit die Forschungsarbeit auf der Hauptkonferenz angenommen werden konnte“, erinnerte sich Cúc.

Dies ist der erste Benchmark, der entwickelt wurde, um das vietnamesische Sprachverständnis großer Sprachmodelle zu bewerten. Der Benchmark umfasst vier Datensätze mit 17.000 Fragen zur Bewertung von Fähigkeiten in den Bereichen Allgemeinwissen, Leseverständnis, logisches Denken und Dialogfähigkeit.

Herr Nguyen Truong Son, Wissenschaftlicher Direktor bei Zalo AI, bestätigte: „Das VMLU-Evaluierungssystem bietet ein einheitliches Bewertungskriterium für umfangreiche vietnamesische Sprachmodelle. Nach seiner Veröffentlichung erhielten wir viel positives Feedback aus der KI-Forschungsgemeinschaft im In- und Ausland. Ich gehe davon aus, dass sich VMLU zukünftig zu einem weit verbreiteten und angewandten Evaluierungsstandard entwickeln wird, nicht nur in der akademischen Welt, sondern auch in Unternehmen, die KI-Produkte entwickeln.“

Anwendung von KI auf die Produkte von Zalo.

Über seinen akademischen Wert hinaus bietet VMLU viele potenzielle Anwendungsmöglichkeiten bei der Entwicklung von KI-Produkten bei Zalo.

Laut Cúc dient der Benchmark erstens der Bewertung der Genauigkeit und des Sprachverständnisses der im Produkt Kiki Info, einem digitalen Bürgerassistenten, verwendeten Modelle. Dies ermöglicht es dem Team, die Grenzen des Modells in Bezug auf bestimmte Fähigkeiten zu identifizieren.

Zweitens wird VMLU als Testwerkzeug eingesetzt, bevor neue KI-Funktionen wie Nachrichtenzusammenfassung, automatische Antwortvorschläge oder Kundendienstunterstützung implementiert werden.

Letztendlich hilft VMLU Zalo mit seinen Funktionen zur Konversationsbewertung dabei, Unternehmens-Chatbots mit natürlich klingender Kommunikation zu entwickeln, die der vietnamesischen Kommunikationskultur entspricht.

„Unser größtes Ziel ist es, KI-Modelle zu entwickeln, die Vietnamesisch auf natürliche und präzise Weise verstehen“, sagte Cúc.

Nach seiner Rückkehr aus Wien hofft der junge Ingenieur, dass die VMLU weiter expandieren und zu einer Plattform für viele inländische Forschungsgruppen werden wird, um Modelle einheitlich zu vergleichen und zu bewerten.

„Ich hoffe, dieser Datensatz wird der Ausgangspunkt für die vietnamesische KI-Community sein, um sich in den kommenden Jahren weiterzuentwickeln. Wir möchten einen kleinen Beitrag dazu leisten, Vietnamesisch zu einer Sprache zu machen, die globale KI-Modelle korrekt verstehen und effektiv verarbeiten können.“

Der Zalo AI Summit 2025 mit dem Thema „Vietnam im Zeitalter der KI-isierung“ findet am Samstag, den 20. Dezember 2025 um 8:00 Uhr auf dem VNG Campus in der Tan Thuan Export Processing Zone in Ho-Chi-Minh-Stadt statt.
Die Veranstaltung wird live auf den offiziellen Informationskanälen von Zalo übertragen und es werden voraussichtlich mehr als 400 KI-Ingenieure teilnehmen.
Registrieren Sie sich zur Teilnahme unter: https://summit.zalo.ai/

Bich Dao

Quelle: https://vietnamnet.vn/nu-ky-su-zalo-dua-cong-nghe-viet-toi-hoi-thao-ai-hang-dau-the-gioi-2471254.html