În ce fel este ChatGPT inferior chatbot-ului de la Baidu?

Conform unui raport al organizației de supraveghere a dezinformării NewsGuard, ChatGPT oferă informații mai inexacte în chineză decât în engleză. Deși modelele în sine sunt multilingve, limbile reprezintă regiuni distincte care se suprapun în setul de date, iar modelelor le lipsesc mecanisme pentru a compara gradul de diferență dintre expresii sau predicții în aceste regiuni.

Conform TechCrunch , atunci când utilizatorii solicită ChatGPT să răspundă în engleză, acesta preia în principal toate datele în limba engleză pe care le are, iar același lucru este valabil și pentru limba chineză.

În martie, Baidu a lansat „Ernie Bot”, un chatbot bazat pe modelul de inteligență artificială (IA) Ernie al gigantului chinez de căutare. În contextul cursei tehnologice intense și continue dintre SUA și China, investițiile Baidu în IA și dezvoltarea acesteia au atras și mai multă atenție.

Potrivit Reuters, Baidu a citat rezultatele testelor efectuate de China Science Daily folosind seturile de date AGIEval și C-Eval, două standarde utilizate pentru a evalua performanța modelelor de inteligență artificială.

Cursa dezvoltării inteligenței artificiale din China are în prezent trei jucători majori: Tencent, Alibaba și Baidu.

Ernie, cu un scor de 3,5, a demonstrat abilități remarcabile la un test de limba chineză bazat pe examene de admitere și competență, cum ar fi cele pentru examenele de admitere la universitate sau examenele de certificare a baroului.

Într-un alt test de limba chineză cu 13.000 de întrebări cu variante multiple de răspuns care acopereau 50 de subiecte diferite, Ernie 3.5 a continuat să demonstreze superioritate față de cei doi concurenți OpenAI ai săi. Cu toate acestea, la efectuarea unui al treilea test dezvoltat de un grup de universități americane, care a inclus întrebări despre științe și studii sociale, Ernie 3.5 a fost complet depășit de ChatGPT și GPT 4.

Directorul tehnic al Baidu, Haifeng Wang, a declarat că la doar trei luni de la lansarea beta a Ernie Bot, modelul de limbaj extins (LLM) al Baidu, construit pe Ernie 3.0 și Ernie 3.5, a înregistrat îmbunătățiri în ceea ce privește eficiența, funcționalitatea și performanța. Aceste îmbunătățiri sunt evidente în scriere, interogare, raționament și generare de cod, precum și în performanța antrenării și inferenței, a spus directorul tehnic.

Baidu a mai declarat că noul model va accepta pluginuri de la Baidu și de la terți. Compania a spus că pluginul „Baidu Search” a fost integrat și dotează Ernie Bot cu capacitatea de a genera informații precise și în timp real. Pluginurile sunt aplicații suplimentare care permit inteligenței artificiale să funcționeze în situații specifice, cum ar fi rezumarea textelor lungi și generarea de răspunsuri mai precise.

Conform unui test realizat în iunie de agenția de știri Xinhua, Ernie Bot, produs de Baidu, s-a clasat pe primul loc printre „ChatGPT-urile din China”. Baidu a insistat pentru integrarea Ernie Bot în alte produse, cum ar fi serviciile sale cloud, și a anunțat un fond de capital de risc în valoare de 139 de milioane de dolari pentru a investi în startup-uri chinezești generative de inteligență artificială, potrivit SCMP .

Robin Li, CEO și cofondator al Baidu, a declarat că este previzibil ca modelele lingvistice mari să pătrundă din ce în ce mai multe domenii, devenind un factor cheie care stimulează economia digitală.

Legătură sursă