Wie verliert ChatGPT gegen den Baidu-Chatbot?

[Anzeige_1]

Laut einem Bericht der Desinformations-Aufsichtsorganisation NewsGuard war die Wahrscheinlichkeit größer, dass ChatGPT Informationen auf Chinesisch falsch darstellte als auf Englisch. Obwohl die Modelle selbst mehrsprachig sind, handelt es sich bei den Sprachen um separate, sich überlappende Bereiche des Datensatzes, und die Modelle verfügen über keinen Mechanismus zum Vergleichen, wie sich bestimmte Ausdrücke oder Vorhersagen zwischen diesen Bereichen unterscheiden.

Laut TechCrunch zieht ChatGPT, wenn ein Benutzer ChatGPT bittet, auf Englisch zu antworten, im Wesentlichen alle verfügbaren englischen Daten ab; dasselbe gilt für Chinesisch.

Im März stellte Baidu „Ernie Bot“ vor, einen Chatbot, der auf dem Ernie-Modell der künstlichen Intelligenz (KI) des chinesischen Suchmaschinenriesen basiert. Während der Technologiewettlauf zwischen den USA und China weiter tobt, haben Baidus Investitionen in und die Entwicklung von KI noch mehr Aufmerksamkeit erregt.

Laut Reuters berief sich Baidu auf Testergebnisse, die von China Science Daily unter Verwendung der Datensätze AGIEval und C-Eval durchgeführt wurden, zwei Benchmarks zur Bewertung der Leistung von KI-Modellen.

Im Wettlauf um die KI-Entwicklung in China sind mittlerweile drei „Giganten“ dabei: Tencent, Alibaba und Baidu.

Ernie 3.5 hat in einem Chinesischtest, dessen Inhalt auf Aufnahme- und Eignungstests basiert, wie sie beispielsweise für die Aufnahmeprüfung zum College oder die Anwaltsprüfung gelten, herausragende Fähigkeiten bewiesen.

In einem weiteren chinesischen Test mit 13.000 Multiple-Choice-Fragen zu 50 verschiedenen Themen schnitt Ernie 3.5 erneut besser ab als die beiden OpenAI-Konkurrenten. Bei einem dritten Test, der von einer Gruppe US-amerikanischer Universitäten entwickelt wurde und Fragen zu Wissenschaft und Gesellschaft enthielt, wurde Ernie 3.5 jedoch von ChatGPT und GPT 4 deutlich abgehängt.

Nur drei Monate nach der Veröffentlichung der Beta-Version von Ernie Bot, Baidus Large Language Model (LLM), das auf Ernie 3.0 basiert, hat Ernie 3.5 laut Baidus CTO Haifeng Wang Verbesserungen bei Effizienz, Funktionalität und Leistung erzielt. Diese Verbesserungen zeigen sich beim Schreiben, bei der Beantwortung von Anfragen, beim Schlussfolgern und bei der Codegenerierung sowie bei der Trainings- und Inferenzleistung, so der CTO.

Baidu kündigte außerdem an, dass das neue Modell Plug-ins von Baidu und Drittanbietern unterstützen wird. Das Plug-in „Baidu Search“ sei integriert und werde Ernie Bot in die Lage versetzen, präzise Informationen in Echtzeit zu generieren. Plug-ins sind zusätzliche Anwendungen, die es der KI ermöglichen, in bestimmten Situationen zu arbeiten, beispielsweise beim Zusammenfassen langer Texte und beim Generieren präziserer Antworten.

Baidus Ernie Bot belegte laut einem im Juni von Xinhua durchgeführten Test den ersten Platz unter „Chinas ChatGPTs“. Baidu hat die Integration von Ernie Bot in andere Produkte, beispielsweise Cloud-Dienste, vorangetrieben und laut SCMP einen Risikokapitalfonds in Höhe von 139 Millionen US-Dollar angekündigt, um in chinesische generative KI-Startups zu investieren.

Es ist absehbar, dass große Sprachmodelle in immer mehr Bereiche vordringen und zu einem Schlüsselfaktor für die digitale Wirtschaft werden, sagte Robin Li, CEO und Mitbegründer von Baidu.

Kommentar (0)