Zalo AI, ücretsiz Vietnamca yeterlilik değerlendirme standartlarını duyurdu

VMLU (Vietnam Çoklu Görev Dili Anlama), Vietnam'daki yapay zeka araştırma ve geliştirme topluluğunun Vietnam Üretken Yapay Zeka modellerinin çıktı kalitesini değerlendirmek için daha fazla araca sahip olmasına yardımcı olmak amacıyla Zalo AI tarafından Japonya İleri Bilim ve Teknoloji Enstitüsü (JAIST) ile iş birliği içinde geliştirildi.

Buna göre, bu, 58 farklı konu etrafında dönen 10.880 çoktan seçmeli soruyla günümüz pazarındaki en çeşitli ihtiyaçları karşılayan, çok yönlü, çok seviyeli bir Vietnam değerlendirme standartları setidir.

zalo ai.jpg — Vietnamca yeterlilik değerlendirme standart seti, Zalo AI mühendisleri tarafından JAIST Enstitüsü ile işbirliği içinde araştırılıp geliştirilerek, özellikle Üretken AI olmak üzere AI modellerinin Vietnamca dilini anlama ve uygulama yeteneğini değerlendirmek amacıyla hazırlanmıştır.

AI Vietnam'ın neden eksiksiz bir Vietnamca dil yeterlilik değerlendirme standartlarına ihtiyacı var?

ChatGPT'nin patlayıcı büyümesi yeni bir yarışın doğmasına neden oldu: Üretken Yapay Zeka. İstatistiklere göre, ChatGPT'nin piyasaya sürülmesinden bu yana, dünyada ChatGPT'ye benzer yaklaşık 16.000 model bulunuyor.

Vietnam, Vietnamca kullanarak Üretken Yapay Zeka ile deneyler yapmak isteyen farklı ölçek ve potansiyellere sahip birçok araştırma grubunun varlığıyla bu trendin dışında kalmıyor. Bu durum, bu yapay zeka modelleri için Vietnamca bilgi ve düşünce düzeyini ölçmek amacıyla bir Vietnamca yeterlilik değerlendirme setine ihtiyaç duyulmasına yol açmıştır.

Mevcut piyasada, Vietnam'daki çoğu LLM araştırma grubu, modelleri için kendi standartlarını içeren kendi değerlendirme araç setlerini oluşturmak zorundadır. Bunlar, kamuoyuna açıklanmamış dahili değerlendirme araçlarıdır. Zalo AI'nın değerlendirme araç seti genel ihtiyaçlara yöneliktir, LLM modelleri için ortak bir standart olabilir ve AI topluluğuna sunulur. Bu, küçük araştırma gruplarının kapsamlı değerlendirme veri setlerine erişmesine ve tarafların sonuçları birbirleriyle karşılaştırmasına olanak tanır. Bu sayede, modeli geliştirmek için motivasyon sağlanır.

Vietnam Yapay Zekasını dünyanın Üretken Yapay Zeka dalgasına katılmaya motive etmek

Kasım 2023'te Zalo AI, VMLU Vietnamca dil yeterlilik değerlendirme standartlarını resmen duyurdu. Bu standartlar, Zalo AI mühendisleri tarafından JAIST Enstitüsü ile iş birliği içinde araştırılıp geliştirilen ve özellikle Üretken Yapay Zeka olmak üzere yapay zeka modellerinin Vietnamca dilini anlama ve uygulama becerisini değerlendiren bir standartlar dizisidir.

VMLU'nun doğuşu, bireyleri, girişimleri veya küçük araştırma gruplarını yeni Vietnam yapay zeka modelleri geliştirmeye motive etti. Bu, yeni araştırmalar için koşullar yaratıyor, temel modellerin doğruluğunu ölçmek ve sonuçlarını iyileştirmek için temel oluşturuyor ve Vietnamlılar tarafından Vietnam halkına hizmet etmek üzere geliştirilen Vietnamca yapay zeka uygulamalarının geliştirme sürecinin tamamlanmasına yardımcı oluyor.

Bu aynı zamanda Vietnam'da Üretken Yapay Zeka'nın gelişiminin daha hızlı ilerlemesini ve dünyadaki yapay zeka gelişim dalgasını yakalamasını teşvik eden önemli faktörlerden biridir.

Vietnamca dil yeterlilik değerlendirme standartları nelerdir?

Buna göre, bu, çok yönlü, çok seviyeli ve Vietnam Üretken Yapay Zeka araştırma ve geliştirme pazarındaki en çeşitli ihtiyaçları karşılayan bir dizi Vietnam dili değerlendirme standardıdır ve iki ana bölüme odaklanır: Veri (test veri seti) ve Vietnam dilini uygulayan Yapay Zeka modellerini test etmek için bir temel olarak bir dizi değerlendirme standardı.

Veri seti, 58 farklı konu etrafında dönen 10.880 çoktan seçmeli soru içermektedir. Her konu yaklaşık 200 sorudan oluşmakta ve STEM, Sosyal Bilimler, Beşeri Bilimler ve geniş bir "Genişletilmiş" kategorisi de dahil olmak üzere 4 alana yayılmıştır. Bu veri setiyle VMLU, İlkokul, Ortaokul, Lise ve Mesleki Eğitim olmak üzere 4 seviyeden oluşan bir zorluk sınıflandırmasına sahiptir - üniversite ve lisansüstü için. Buradan yola çıkarak araç seti, yapay zeka modellerinin hem temel bilgi hem de karmaşık problemleri çözmede Vietnamca dil yeterliliğini etkili bir şekilde değerlendirmeye yardımcı olur.

Ayrıca, araştırma gruplarının Vietnam AI modellerinin kapasitesini kolayca değerlendirmelerine yardımcı olmak için Zalo AI mühendislik ekibi, grupların bunları hızlı ve basit bir şekilde kullanabilmeleri için eşlik eden talimatlar tasarladı.

Vietnam AI topluluğuna katkıda bulunun

VMLU standart seti, herhangi bir kullanıcı, araştırma grubu veya işletmeden ücret talep etmeden, özellikle Vietnam AI araştırma topluluğuna ve genel olarak bilgi teknolojileri topluluğuna katkıda bulunmak ve onları geliştirmek amacıyla araştırılmış bir ürün olarak doğdu.

Zalo AI daha önce Vietnam AI topluluğu için Zalo AI Challenge, Zalo AI Hackathon, Zalo AI Summit gibi bir dizi yarışma ve program uyguladı, devreye aldı ve organize etti. Bu aktiviteler yalnızca Vietnam AI topluluğu için bir oyun alanı yaratmakla kalmıyor, aynı zamanda AI'nın hayatta uygulanmasını teşvik ediyor, acil sosyal sorunları çözüyor ve milyonlarca Vietnamlının ihtiyaçlarını karşılıyor.

Ho Chi Minh Şehri Ulusal Üniversitesi, Doğa Bilimleri Üniversitesi Öğretim Üyesi ve Zalo Yapay Zeka Araştırma Bölümü Başkanı Dr. Chau Thanh Duc şunları söyledi: "Zalo Yapay Zeka, Vietnam Yapay Zeka topluluğuna her zaman katkıda bulunmayı ve Vietnam Yapay Zekası'nın gelişmesi için motivasyon sağlamayı hedefliyor. Bu noktadan sonra, Vietnamlılar tarafından Vietnamlılar için giderek daha fazla Yapay Zeka ürünü üretileceğini umuyoruz."

[reklam_2]
Kaynak