A VMLU-t (vietnami többfeladatos nyelvmegértés) a Zalo AI fejlesztette ki a Japán Fejlett Tudományos és Technológiai Intézettel (JAIST) együttműködve, hogy segítse a vietnami MI-kutatási és -fejlesztési közösséget abban, hogy több eszközzel rendelkezzenek a vietnami generatív MI-modellek kimeneti minőségének értékeléséhez.
Ennek megfelelően ez egy olyan vietnami értékelési szabványkészlet, amely sokrétű, többszintű, és a mai piacon elérhető legváltozatosabb igényeket is kielégíti, 10 880 feleletválasztós kérdéssel, amelyek 58 különböző témát ölelnek fel.
Miért van szüksége az AI Vietnamnak egy komplett vietnami nyelvvizsga-szabványrendszerre?
A ChatGPT robbanásszerű növekedése egy új versenyt hozott létre: a generatív mesterséges intelligenciát. A statisztikák szerint a ChatGPT bevezetése óta jelenleg körülbelül 16 000, a ChatGPT-hez hasonló modell létezik a világon .
Vietnam sem marad ki ebből a trendből, mivel számos különböző méretű és potenciállal rendelkező kutatócsoport szeretne kísérletezni a vietnami nyelvet használó generatív mesterséges intelligenciával. Ez vezetett ahhoz, hogy szükség van egy vietnami nyelvi jártassági felmérésre ezekhez a mesterséges intelligencia modellekhez, hogy felmérjék a vietnami nyelvű tudás és gondolkodás szintjét.
A jelenlegi piacon a legtöbb vietnami LLM kutatócsoportnak saját értékelési eszköztárat kell létrehoznia, saját szabványokkal a modelljeihez. Ezek belső értékelési eszközök, amelyeket nem hoztak nyilvánosságra. A Zalo AI értékelési eszköztárát az általános igények kielégítésére tervezték, közös szabványként szolgálhat az LLM modellek számára, és az AI közösség számára biztosítják. Ez segít a kis kutatócsoportoknak az átfogó értékelési adatkészletekhez való hozzáférésben, és lehetővé teszi a felek számára, hogy összehasonlítsák az eredményeket egymással. Innentől kezdve motivációt teremt a modell fejlesztésére.
A vietnami mesterséges intelligencia motiválása a világ generatív mesterséges intelligencia hullámához való csatlakozásra
2023 novemberében a Zalo AI hivatalosan is bejelentette a VMLU vietnami nyelvvizsga-szabványait. Ez egy olyan szabványrendszer, amelyet a Zalo AI mérnökei a JAIST Intézettel együttműködve kutatta és fejlesztett ki, hogy felmérje a mesterséges intelligencia modellek, különösen a generatív mesterséges intelligencia vietnami nyelvének megértését és alkalmazását.
A VMLU megszületése arra ösztönözte az egyéneket, a startupokat és a kis kutatócsoportokat, hogy új vietnami MI-modelleket fejlesszenek ki. Ez megteremti a feltételeket az új kutatásokhoz, lefekteti az alapmodellek pontosságának mérésének és eredményeinek frissítésének alapjait, segítve a vietnami nyelvű MI-alkalmazások fejlesztési folyamatának befejezését, amelyeket vietnami emberek hoztak létre a vietnami emberek szolgálatára.
Ez az egyik fontos tényező, ami elősegíti a generatív mesterséges intelligencia gyorsabb fejlődését Vietnámban, hogy utolérje a világ mesterséges intelligencia-fejlesztési hullámát.
Mik a vietnami nyelvvizsga-követelmények?
Ennek megfelelően ez egy olyan vietnami nyelvi értékelési szabványkészlet, amely sokrétű, többszintű, és a vietnami generatív mesterséges intelligencia kutatási és fejlesztési piacának legkülönfélébb igényeit elégíti ki, két fő részre összpontosítva: adatokra (tesztadatkészlet) és értékelési szabványkészletre, amelyek a vietnami nyelvet alkalmazó mesterséges intelligencia modellek tesztelésének alapjául szolgálnak.
Konkrétan az adatkészlet 10 880 feleletválasztós kérdést tartalmaz, amelyek 58 különböző témát ölelnek fel. Minden téma körülbelül 200 kérdést tartalmaz, és 4 területre oszlanak, beleértve: STEM, társadalomtudományok, humán tudományok és egy tágabb „Bővített” kategória. Ezzel az adatkészlettel a VMLU 4 nehézségi szintre sorolja a diákokat: általános iskolai, középiskolai, gimnáziumi és szakiskolai – egyetemi és posztgraduális képzések számára. Innen kiindulva az eszközkészlet segít hatékonyan értékelni a mesterséges intelligencia modellek vietnami nyelvi jártasságát mind az elemi ismeretek, mind az összetett problémák megoldása terén.
Ezenkívül, hogy a kutatócsoportok könnyen felmérhessék vietnami MI-modelljeik kapacitását, a Zalo AI mérnöki csapata mellékelt utasításokat készített, hogy a csoportok gyorsan és egyszerűen használhassák azokat.
Járulj hozzá a vietnami MI közösséghez
A VMLU szabványkészlet kutatási termékként született azzal a céllal, hogy hozzájáruljon és fejlessze a vietnami MI-kutatói közösséget, és általában az informatikai közösséget anélkül, hogy ez díjat számítana fel a felhasználóknak, kutatócsoportoknak vagy vállalkozásoknak.
A Zalo AI korábban számos versenyt és programot valósított meg, vezetett be és szervezett a vietnami MI-közösség számára, mint például: Zalo AI Challenge, Zalo AI Hackathon, Zalo AI Summit... Ezek a tevékenységek nemcsak játszóteret teremtenek a vietnami MI-közösség számára, hanem ösztönzik a MI alkalmazását az életben, megoldják a sürgető társadalmi problémákat, és vietnami emberek millióinak igényeit szolgálják.
Dr. Chau Thanh Duc, a Zalo MI Kutató Osztály vezetője és a Ho Si Minh- városi Nemzeti Egyetem Természettudományi Egyetemének előadója megerősítette: „A Zalo AI mindig arra törekszik, hogy hozzájáruljon a vietnami MI közösséghez, motiválva a vietnami MI fejlődését. Innentől kezdve arra számítunk, hogy egyre több MI-termék fog megjelenni vietnami emberektől, vietnami emberek számára.”
[hirdetés_2]
Forrás






Hozzászólás (0)