V čem je ChatGPT horší než chatbot od Baidu?

Podle zprávy organizace NewsGuard, která se zabývá ochranou proti dezinformacím, poskytuje ChatGPT nepřesnější informace v čínštině než v angličtině. I když jsou samotné modely vícejazyčné, jazyky se v datové sadě překrývají v různých oblastech a modely postrádají mechanismy pro porovnání míry rozdílů mezi frázemi nebo predikcemi v těchto oblastech.

Podle TechCrunchu , když uživatelé požádají ChatGPT o odpověď v angličtině, primárně načte všechna anglická data, která má, a totéž platí i pro čínštinu.

V březnu společnost Baidu představila chatbota „Ernie Bot“ založeného na modelu umělé inteligence (AI) Ernie od čínského vyhledávacího giganta. Uprostřed probíhajícího a intenzivního technologického závodu mezi USA a Čínou přitahují investice společnosti Baidu do umělé inteligence a její vývoj ještě větší pozornost.

Podle agentury Reuters Baidu citoval výsledky testů provedených deníkem China Science Daily s využitím datových sad AGIEval a C-Eval, což jsou dva standardy používané k hodnocení výkonu modelů umělé inteligence.

V čínském závodě ve vývoji umělé inteligence se v současnosti nacházejí tři hlavní hráči: Tencent, Alibaba a Baidu.

Ernie s výsledkem 3,5 prokázal vynikající schopnosti v testu z čínštiny, který byl založen na přijímacích a odborných zkouškách, jako jsou zkoušky pro přijímací zkoušky na univerzity nebo zkoušky pro advokátní certifikaci.

V dalším testu z čínštiny s 13 000 otázkami s výběrem odpovědí pokrývajícími 50 různých témat Ernie 3.5 i nadále prokazoval převahu nad svými dvěma konkurenty z OpenAI. Při provedení třetího testu vyvinutého skupinou amerických univerzit, který zahrnoval otázky z oblasti přírodních věd a společenských věd, však Ernie 3.5 zcela překonal ChatGPT a GPT 4.

Technický ředitel společnosti Baidu, Haifeng Wang, uvedl, že pouhé tři měsíce po vydání beta verze Ernie Bot dosáhl model velkých jazyků (LLM) společnosti Baidu, postavený na verzích Ernie 3.0 a Ernie 3.5, zlepšení v efektivitě, funkčnosti a výkonu. Tato vylepšení jsou patrná v psaní, dotazování, uvažování a generování kódu, stejně jako ve výkonu trénování a inference, uvedl technický ředitel.

Společnost Baidu také uvedla, že nový model bude podporovat pluginy od Baidu a třetích stran. Společnost uvedla, že byl integrován plugin „Baidu Search“, který Ernie Botovi umožňuje generovat přesné informace v reálném čase. Pluginy jsou doplňkové aplikace, které umožňují umělé inteligenci fungovat v konkrétních situacích, jako je shrnutí dlouhých textů a generování přesnějších odpovědí.

Podle červnového testu provedeného tiskovou agenturou Xinhua se Ernie Bot od Baidu umístil na prvním místě mezi „čínskými ChatGPT“. Baidu prosazuje integraci Ernie Bot do dalších produktů, jako jsou jeho cloudové služby, a podle SCMP oznámil fond rizikového kapitálu v hodnotě 139 milionů dolarů na investice do čínských startupů v oblasti generativní umělé inteligence.

Generální ředitel a spoluzakladatel společnosti Baidu Robin Li uvedl, že je předvídatelné, že velké jazykové modely budou stále více pronikat do dalších oblastí a stanou se klíčovým faktorem hnací silou digitální ekonomiky .

Zdrojový odkaz