GPT Pho, Vietnam'ı dünya teknoloji haritasına yerleştiriyor

Pho GPT, Pho - Generative Pre-trained Transformer'ın kısaltmasıdır ve Vingroup Corporation'ın bir üyesi olan VinAI mühendislik ekibi tarafından uygulanan, Vietnamca'ya adanmış büyük bir dil modeli projesidir.

Dünya teknolojisini "yakalayın"

Pho GPT, OpenAI veya ChatGPT gibi tescilli yazılımlar yerine açık kaynaklı kod kullanır. Bu, Pho GPT'nin kaynak kodunun herkese açık ve erişilebilir olduğu ve kullanıcıların özel uygulamalar aracılığıyla Pho GPT'nin geliştirilmesine katkıda bulunabileceği anlamına gelir.

VinAI'nin tanıtımına göre, Pho GPT, Transformer kod çözme platformu üzerine kurulu 7,5 milyar parametreye sahip. Bu model, Flash Attention mekanizması ve AliBi bağlam uzunluğu ekstrapolasyonu gibi mevcut en gelişmiş teknikler kullanılarak sıfırdan eğitildi.

Bu teknikler, Pho GPT'nin bağlamı daha derinlemesine anlamasına yardımcı olmakla kalmaz, aynı zamanda uygulamanın kullanım sırasında doğal bir şekilde diyalog kurma ve etkileşim kurma yeteneğini de artırır. Bu da modeli, kullanıcıların çeşitli dil ihtiyaçlarını karşılayabilen çok yönlü ve çok işlevli bir araç haline getirir.

Bay Bui Hai Hung, VinAI Genel Müdürü.

Pho GPT'nin doğuşunun önemi hakkında konuşan VinAI Genel Müdürü Bay Bui Hai Hung, projenin amacının Vietnam dili ve kültürü için ChatGPT'ye benzer modeller geliştirmek olduğunu söyledi. Pho GPT, Vietnam yazı stilini önceki nesil dil teknolojilerinden daha üstün bir şekilde anlama ve yazma yeteneğine sahip. Model ayrıca, dünyadaki diğer modellere bağlı kalmadan Vietnam veri setiyle sıfırdan eğitilerek Vietnam için gelişmiş temel teknolojiye hakimiyet sağlanıyor.

Şunu da belirtmekte fayda var ki, dünya Chat GPT'nin doğuşunu heyecanla beklerken, bir yıl sonra Vietnam'da Pho GPT ortaya çıktı. Bay Bui Hai Hung'a göre VinAI, Güneydoğu Asya'da açık kaynak kodlu büyük bir dil modelini başlatan öncü firma. Birkaç hafta sonra, benzer bir ürün Singapur'da piyasaya sürüldü.

Vietnam Yapay Zekasını Yükseltmek

Pho GPT-7B5-Instruct versiyonunun kapalı kaynak kodlu ChatGPT (GPT-3.5-turbo) ve diğer açık kaynak kodlu modellerle karşılaştırma sonuçları, Pho GPT'nin çoğu değerlendirme kategorisinde ChatGPT'den sonra ikinci sırada yer aldığını göstermektedir.

Pho GPT, diğer dil modellerine, özellikle de ChatGPT'ye kıyasla birçok farklılığa sahiptir. Vietnam halkının bağlamını, dilbilgisini, kelime dağarcığını ve ifadelerini yansıtarak, Vietnamca yazı stilini doğal bir şekilde anlamak ve yazmak için tasarlanmıştır. Vietnam kültürü, tarihi, coğrafyası, toplumu, eğlence, spor vb. konularda kullanıcılarla etkileşim kurabilir.

Ayrıca, Pho GPT açık kaynaklı ve esnektir. Kullanıcılar, özellikle yüksek güvenlik gerektirenler olmak üzere, özel yazılım kaynaklarına güvenmeden özelleştirilmiş ve benzersiz uygulamalar geliştirebilirler.

Aynı zamanda, Pho GPT'nin önceliği, en son optimizasyon tekniklerini kullanarak eğitimle yüksek performans ve maliyet tasarrufu sağlamak, uygulamanın boyutunu küçültmeye ve hızını artırmaya yardımcı olmaktır. Pho GPT ayrıca daha küçük bir bilgi işlem platformunda da çalışabilir, bu da maliyetleri düşürmeye ve kaynak tasarrufu sağlamaya yardımcı olur.

41 GB'a kadar bir Vietnam veri ambarı ile eğitilen, bunun 1 GB'ı Wikipedia metni ve haber veri setinden tekrarları kaldıran 40 GB'lık bir varyantı olan, Mosaicml llm'nin llm-foundry kütüphanesini kullanacak şekilde eğitilen Pho GPT, makaleler, şiirler, şarkılar, denemeler, konuşmalar, tanıtımlar gibi kullanıcı isteklerine göre metin parçaları üretebilir. Pho GPT ayrıca kısa öyküler, yorumlar, atasözleri, mesajlar, tweetler, memler gibi yaratıcı, mizahi içerikler de oluşturabilir. Aynı zamanda güncel olaylar, eğitim, sağlık, seyahat, mutfak, spor, eğlence gibi farklı konularda kullanıcılarla diyalog kurar. Ayrıca, Pho GPT kullanıcıların sorularını yanıtlayabilir, bilgi, tavsiye, destek sağlayabilir, soruları yanıtlayabilir.

Ayrıca Pho GPT, resmi, ticari, akademik, edebi belgeler gibi farklı nitelikteki metinleri veya metin türlerini Vietnamcadan diğer dillere ve tersi yönde çevirebilir.

Pho GPT'nin öne çıkan bir diğer özelliği ise özetleme, sınıflandırma, etiketleme, bilgi çıkarma, duyguları tespit etme, hataları tespit etme, yazım stilini geliştirme gibi metin paragraflarını analiz edip işleyebilmesidir.

Pho GPT geliştirme ekibi, gelecekte modeli geliştirmeye devam edeceklerini ve projeyi özellikle Güneydoğu Asya bölgesinde diğer dillere genişleteceklerini söyledi.

VinAI temsilcisi, "Pho GPT'nin doğuşu, Vietnam'ın bu ileri teknoloji alanında dünyaya "yetişme" ve dünyadan bağımsız olarak Vietnam halkı için özel olarak açık kaynak kodlu, Vietnamca için optimize edilmiş büyük bir dil modeline sahip olma fırsatını ilk kez yakaladığı anlamına geliyor. Bu, özellikle Vin AI'nın ve genel olarak Vietnam halkının gurur kaynağıdır," diye ekledi.

Pho GPT'nin önümüzdeki dönemdeki potansiyeli ve gelişme fırsatları hakkında yorum yapan Planlama ve Yatırım Bakan Yardımcısı Tran Duy Dong, şunları vurguladı: "Yapay zeka, Vietnam'ın güçlü bir şekilde gelişme ve kısa sürede dünya seviyesine ulaşma potansiyeline sahip olduğu alanlardan biri olacak. Bakanlık, özellikle yapay zeka topluluğunu, genel olarak bilim ve teknoloji topluluğunu, kapsamlı ve dinamik bir inovasyon ekosistemi geliştirmek ve ülkenin genel kalkınmasına katkıda bulunmak için her zaman destekleyecek ve eşlik edecektir."

[reklam_2]
Kaynak