En quoi ChatGPT est-il inférieur au chatbot de Baidu ?

D'après un rapport de NewsGuard, organisme de surveillance de la désinformation, ChatGPT était plus susceptible de déformer l'information en chinois qu'en anglais. Bien que les modèles soient multilingues, les langues constituent des régions distinctes et partiellement superposées de l'ensemble de données, et les modèles ne disposent d'aucun mécanisme permettant de comparer les différences entre ces régions concernant certaines expressions ou prédictions.

Selon TechCrunch , lorsqu'un utilisateur demande à ChatGPT de répondre en anglais, le système utilise essentiellement toutes les données en anglais dont il dispose, et il en va de même pour le chinois.

En mars, Baidu a lancé « Ernie Bot », un chatbot basé sur le modèle d'intelligence artificielle (IA) Ernie du géant chinois de la recherche. Alors que la course technologique entre les États-Unis et la Chine fait toujours rage, les investissements et le développement de l'IA par Baidu suscitent un intérêt croissant.

Selon Reuters, Baidu a cité les résultats de tests effectués par le China Science Daily à l'aide des ensembles de données AGIEval et C-Eval, deux références utilisées pour évaluer les performances des modèles d'IA.

La course chinoise au développement de l'IA compte désormais trois « géants » : Tencent, Alibaba et Baidu.

Ernie 3.5 a démontré des aptitudes exceptionnelles lors d'un test chinois dont le contenu est basé sur des tests d'entrée et de compétence, tels que ceux des examens d'entrée à l'université ou des examens du barreau.

Lors d'un autre test chinois comportant 13 000 questions à choix multiples couvrant 50 thèmes différents, Ernie 3.5 a continué de surpasser les deux concurrents d'OpenAI. Cependant, lors d'un troisième test élaboré par un groupe d'universités américaines, incluant des questions sur les sciences et la société, Ernie 3.5 a été largement distancé par ChatGPT et GPT 4.

Trois mois seulement après la sortie de la version bêta d'Ernie Bot, le modèle de langage à grande échelle (LLM) de Baidu, basé sur Ernie 3.0, Ernie 3.5 bénéficie d'améliorations significatives en termes d'efficacité, de fonctionnalités et de performances, a déclaré Haifeng Wang, directeur technique de Baidu. Ces améliorations sont manifestes dans la rédaction, la réponse aux requêtes, le raisonnement et la génération de code, ainsi que dans les performances d'entraînement et d'inférence, a-t-il précisé.

Baidu a également annoncé que le nouveau modèle sera compatible avec les modules d'extension de Baidu et de tiers. L'entreprise a précisé que le module « Baidu Search » a été intégré et permettra à Ernie Bot de générer des informations précises en temps réel. Les modules d'extension sont des applications supplémentaires qui permettent à l'IA d'intervenir dans des situations spécifiques, comme la synthèse de textes longs et la génération de réponses plus pertinentes.

Selon un test réalisé en juin par Xinhua, Ernie Bot de Baidu s'est classé premier parmi les « chatGPT chinois ». Baidu s'efforce d'intégrer Ernie Bot à d'autres produits, tels que ses services cloud, et a annoncé un fonds de capital-risque de 139 millions de dollars destiné à investir dans des startups chinoises spécialisées dans l'IA générative, d'après le SCMP .

« Il est prévisible que les grands modèles de langage s'étendent à de plus en plus de domaines, devenant ainsi un facteur clé de la croissance de l' économie numérique », a déclaré Robin Li, PDG et cofondateur de Baidu.

Lien source