ज़ालो एआई और जेएआईएसटी संस्थान ने उन्नत एलएलएम विकसित करने के लिए समुदाय के साथ हाथ मिलाया

ज़ालो एआई और जापान एडवांस्ड इंस्टीट्यूट ऑफ साइंस एंड टेक्नोलॉजी (जेएआईएसटी) ने एलएलएम के तर्क और अंतःक्रिया कौशल के मूल्यांकन के लिए मानकों के एक सेट की घोषणा की है, जो उच्च स्तरीय एलएलएम मॉडल को पूर्ण करने में वियतनामी एआई समुदाय के साथ है।

कृत्रिम बुद्धिमत्ता (एआई) का तीव्र विकास हो रहा है और एआई मॉडल अनुसंधान में महत्वपूर्ण प्रगति के कारण अभूतपूर्व अवसर खुल रहे हैं, जिससे अनुप्रयोगों को बढ़ावा देने के साथ-साथ व्यावहारिक आवश्यकताओं को पूरा करने वाले उत्पाद विकसित करने का आधार तैयार हो रहा है। वियतनाम में, चैटजीपीटी के सशक्त विकास के तुरंत बाद, जिसके कारण वैश्विक स्तर पर इसी तरह के कई एआई मॉडलों का जन्म हुआ, विभिन्न पैमानों और क्षमताओं वाले घरेलू अनुसंधान समूह वियतनामी वृहद भाषा मॉडल (एलएलएम) का निर्माण करके इस दौड़ में शामिल हो गए हैं।

वियतनामी एलएलएम मॉडलों के प्रसार के लिए सामान्य मूल्यांकन मानदंडों के एक सेट की आवश्यकता होती है, ताकि डेवलपर्स को उपयुक्त प्रशिक्षण रणनीतियों के लिए मॉडल की गुणवत्ता को मापने में मदद मिल सके।

डॉ. गुयेन ट्रुओंग सोन - प्लेटफॉर्म डेवलपर, ज़ालो एआई के वैज्ञानिक निदेशक - ने वीएमएलयू वियतनामी एलएलएम का मूल्यांकन किया: "दुनिया की तुलना में वियतनामी बाजार में गुणवत्ता मूल्यांकन मानकों का अभाव है।"

वीएमएलयू एलएलएम मूल्यांकन प्लेटफॉर्म को ज़ालो एआई और जापान एडवांस्ड इंस्टीट्यूट ऑफ साइंस एंड टेक्नोलॉजी (जेएआईएसटी) द्वारा विकसित किया गया था।

डॉ. गुयेन ट्रुओंग सोन के अनुसार, इस वास्तविकता के लिए वियतनामी एआई समुदाय को वियतनामी एआई मॉडलों का उचित और पर्याप्त मूल्यांकन करने में मदद करने के लिए सामान्य मानकों को बनाने के लिए हाथ मिलाने की आवश्यकता है, जिससे तेजी से बेहतर गुणवत्ता वाले मॉडल के विकास के लिए आधार तैयार हो सके।

नए गुणवत्ता मानकों के विकास को बढ़ावा देना

नवंबर 2023 में, ज़ालो एआई और जापान एडवांस्ड इंस्टीट्यूट ऑफ साइंस एंड टेक्नोलॉजी (जेएआईएसटी) वियतनामी एलएलएम मॉडलों की गुणवत्ता के मूल्यांकन के लिए मानकों का एक सेट बनाने और समुदाय को मुफ़्त में उपलब्ध कराने के लिए सहयोग करेंगे, जिसे वीएमएलयू (वियतनामी मल्टीटास्क लैंग्वेज अंडरस्टैंडिंग बेंचमार्क सूट फॉर लार्ज लैंग्वेज मॉडल्स) कहा जाता है। यह "मेक इन वियतनाम" मानकों का पहला सेट है जिस पर अग्रणी वियतनामी विशेषज्ञों की एक टीम द्वारा शोध किया गया है और समुदाय के लिए जारी किया गया है।

अपने स्वयं के मानकों के साथ अपने स्वयं के मूल्यांकन उपकरण बनाने के बजाय, वियतनामी एलएलएम अनुसंधान समूह एक व्यापक और सामान्य मूल्यांकन डेटासेट तक पहुंचने में सक्षम रहे हैं।

वीएमएलयू के मानक बढ़ते हुए कठिनाई स्तरों के साथ एसटीईएम, सामाजिक विज्ञान, मानविकी और विस्तार सहित चार क्षेत्रों पर केंद्रित हैं: प्राथमिक, माध्यमिक, हाई स्कूल और व्यावसायिक (स्नातक और स्नातकोत्तर)। 58 विषयों को कवर करने वाले 10,880 बहुविकल्पीय प्रश्नों के साथ, जिन्हें कई स्तरों में विभाजित किया गया है, 2023 संस्करण ने एलएलएम के बुनियादी ज्ञान का प्रभावी ढंग से आकलन करने में मदद की है।

2024 के अंत तक, VMLU ने रैंकिंग में 45 LLM प्रकाशित किए थे, 155 से ज़्यादा संगठनों और व्यक्तियों से मूल्यांकन अनुरोध प्राप्त किए थे, और प्लेटफ़ॉर्म से मूल्यांकन मानदंडों के 691 डाउनलोड और 3,729 LLM मूल्यांकनों का सारांश तैयार किया था। कई घरेलू और विदेशी संगठन VMLU मानकों का उपयोग करते हैं जैसे VinBigData, VNPT AI, Viettel Solutions, हो ची मिन्ह सिटी यूनिवर्सिटी ऑफ़ टेक्नोलॉजी - VNU, UONLP x Ontocord - ओरेगन यूनिवर्सिटी (USA), DAMO अकादमी - अलीबाबा ग्रुप, SDSRV टीम्स - सैमसंग...

नए चरण में, एलएलएम मॉडलों को मजबूती से उन्नत किया गया है, तथा जटिल दक्षताओं का अधिक गहराई से आकलन करने के लिए मानकों की आवश्यकता है।

"एलएलएम मॉडल ज़्यादा स्मार्ट होते जा रहे हैं, प्रश्नों को समझने और सही उत्तर देने में लगभग पूरी तरह सक्षम। इसलिए, डेवलपर्स एलएलएम को मनुष्यों के समान पढ़ने की समझ, योजना बनाने, संवाद और तर्क जैसी विविध क्षमताओं से लैस करने पर ज़्यादा ध्यान केंद्रित कर रहे हैं," जापान एडवांस्ड इंस्टीट्यूट ऑफ साइंस एंड टेक्नोलॉजी (जेएआईएसटी) के प्रोफ़ेसर गुयेन ले मिन्ह ने कहा, जो वीएमएलयू मूल्यांकन सेट विकसित करने में ज़ालो एआई के एक सहयोगी हैं।

डेवलपर्स की बढ़ती विविध आवश्यकताओं का जवाब देते हुए, वीएमएलयू ने हाल ही में 3 कौशलों का आकलन करने के लिए मानकों का एक नया सेट लॉन्च किया है जिसमें (1) रीडिंग कॉम्प्रिहेंशन (ViSQuAD), (2) रीजनिंग (ViDrop) और (3) इंटरेक्शन (ViDialog) शामिल हैं।

वी.एम.एल.यू. 2025 मानक.

मानकों का नया सेट VMLU वेबसाइट https://vmlu.ai/ पर व्यक्तियों और अनुसंधान समूहों के लिए उनके मॉडलों का मूल्यांकन करने हेतु लॉन्च किया गया है।

एआई महारत समुदाय के साथ प्रयास

वी.एम.एल.यू. के विशेषज्ञों ने कहा कि वे विभिन्न डोमेन में कठिनाई के विभिन्न स्तरों के साथ अधिक विविध मूल्यांकन सेटों पर शोध और निर्माण जारी रखेंगे, ताकि बड़े भाषा मॉडलों का अधिक व्यापक और सटीक मूल्यांकन किया जा सके, जो उपयोगकर्ताओं के उपयोग पैटर्न को प्रतिबिंबित कर सकें।

इसके अलावा, वीएमएलयू का लक्ष्य एलएलएम मॉडल की सुरक्षा और अखंडता के लिए मूल्यांकन मानकों का एक सेट विकसित करना भी है, ताकि यह सुनिश्चित किया जा सके कि वियतनामी एलएलएम को जिम्मेदारी से विकसित किया जाए।

वियतनामी लोगों की नई तकनीक में महारत हासिल करने की क्षमता और भावना को बढ़ावा देने के लिए, वीएमएलयू के मूल्यांकन मानकों को वियतनामी एलएलएम अनुसंधान समुदाय को निःशुल्क प्रदान किया जाता रहेगा।

VMLU 2025 मानकों को VMLU वेबसाइट पर अद्यतन कर दिया गया है।

वियतनाम में कृत्रिम बुद्धिमत्ता के क्षेत्र में अग्रणी के रूप में, ज़ालो एआई हमेशा वियतनामी उपयोगकर्ताओं के लिए एआई समाधानों के अनुसंधान और विकास में समुदाय के साथ रहता है।

प्रमुख वियतनामी भाषा मॉडलों की क्षमताओं के मूल्यांकन और रैंकिंग के लिए मंच के अलावा, ज़ालो एआई ने 2017 से ज़ालो एआई चैलेंज और वार्षिक ज़ालो एआई समिट फ़ोरम का भी आयोजन किया है। ये आयोजन न केवल वियतनामी एआई समुदाय को जोड़ते हैं, बल्कि वियतनामी लोगों द्वारा वियतनामी लोगों की सेवा के लिए एआई प्रौद्योगिकी उत्पादों के निर्माण को प्रेरित और प्रोत्साहित करने में भी योगदान देते हैं।

स्रोत: https://znews.vn/zalo-ai-vien-jaist-dong-hanh-cung-cong-dong-phat-trien-llm-bac-cao-post1589913.html