Inwiefern ist ChatGPT dem Chatbot von Baidu unterlegen?

Laut einem Bericht der Desinformations-Beobachtungsorganisation NewsGuard liefert ChatGPT auf Chinesisch mehr ungenaue Informationen als auf Englisch. Obwohl die Modelle selbst mehrsprachig sind, stellen die Sprachen klar voneinander abgegrenzte, sich überschneidende Bereiche des Datensatzes dar. Den Modellen fehlen Mechanismen, um den Grad der Unterschiede zwischen Formulierungen oder Vorhersagen in diesen Bereichen zu vergleichen.

Laut TechCrunch ruft ChatGPT bei der Aufforderung an Nutzer, auf Englisch zu antworten, in erster Linie alle vorhandenen englischen Daten ab; das Gleiche gilt für Chinesisch.

Im März stellte Baidu den „Ernie Bot“ vor, einen Chatbot, der auf dem KI-Modell Ernie des chinesischen Suchmaschinenriesen basiert. Angesichts des anhaltenden und intensiven Technologiewettlaufs zwischen den USA und China hat Baidus Investition in und Entwicklung von KI noch mehr Aufmerksamkeit erregt.

Laut Reuters berief sich Baidu auf Testergebnisse, die von China Science Daily unter Verwendung der Datensätze AGIEval und C-Eval durchgeführt wurden – zwei Standards, die zur Bewertung der Leistungsfähigkeit von KI-Modellen herangezogen werden.

Im chinesischen Wettlauf um die Entwicklung künstlicher Intelligenz gibt es derzeit drei Hauptakteure: Tencent, Alibaba und Baidu.

Ernie erzielte eine Punktzahl von 3,5 und bewies damit herausragende Fähigkeiten in einem Chinesisch-Sprachtest, der auf Aufnahmeprüfungen und Leistungsnachweisen basiert, wie sie beispielsweise für Hochschulaufnahmeprüfungen oder Anwaltszulassungsprüfungen verwendet werden.

In einem weiteren Chinesisch-Sprachtest mit 13.000 Multiple-Choice-Fragen zu 50 verschiedenen Themenbereichen zeigte Ernie 3.5 weiterhin seine Überlegenheit gegenüber den beiden OpenAI-Konkurrenten. Bei einem dritten Test, der von einer Gruppe amerikanischer Universitäten entwickelt wurde und Fragen zu Naturwissenschaften und Sozialwissenschaften enthielt, war Ernie 3.5 jedoch ChatGPT und GPT 4 deutlich unterlegen.

Haifeng Wang, Chief Technology Officer von Baidu, erklärte, dass das große Sprachmodell (LLM) von Baidu, basierend auf Ernie 3.0 und Ernie 3.5, nur drei Monate nach der Beta-Veröffentlichung von Ernie Bot bereits Verbesserungen in Effizienz, Funktionalität und Leistung erzielt habe. Diese Verbesserungen zeigten sich deutlich beim Schreiben, Abfragen, Schlussfolgern und der Codegenerierung sowie in der Trainings- und Inferenzleistung, so der CTO.

Baidu gab außerdem bekannt, dass das neue Modell Plugins von Baidu und Drittanbietern unterstützt. Das Unternehmen erklärte, dass das „Baidu Search“-Plugin integriert wurde und Ernie Bot die Fähigkeit verleiht, präzise Informationen in Echtzeit zu generieren. Plugins sind zusätzliche Anwendungen, die es KI ermöglichen, in bestimmten Situationen zu arbeiten, beispielsweise lange Texte zusammenzufassen und genauere Antworten zu generieren.

Laut einem im Juni von der Nachrichtenagentur Xinhua durchgeführten Test belegte Baidus Ernie Bot den ersten Platz unter Chinas ChatGPTs. Baidu drängt auf die Integration des Ernie Bots in andere Produkte, wie beispielsweise seine Cloud-Dienste, und kündigte laut SCMP einen Risikokapitalfonds in Höhe von 139 Millionen US-Dollar an, um in chinesische KI-Startups im Bereich der generativen Programmierung zu investieren.

Baidu-CEO und Mitbegründer Robin Li sagte, es sei absehbar, dass große Sprachmodelle zunehmend in immer mehr Bereiche vordringen und zu einem Schlüsselfaktor für die Entwicklung der digitalen Wirtschaft werden würden.

Kommentar (0)