Почему ChatGPT проигрывает чат-боту Baidu?

Согласно отчёту организации NewsGuard, занимающейся контролем за дезинформацией, ChatGPT чаще искажал информацию на китайском языке, чем на английском. Хотя сами модели многоязычны, эти языки представляют собой отдельные перекрывающиеся области набора данных, и у моделей нет механизма для сравнения различий в определённых фразах или прогнозах между этими областями.

По данным TechCrunch , когда пользователь просит ChatGPT ответить на английском языке, система по сути извлекает все имеющиеся у нее данные на английском языке; то же самое касается и китайского языка.

В марте Baidu представила «Ernie Bot» — чат-бота, основанного на модели искусственного интеллекта (ИИ) Ernie китайского поискового гиганта. В условиях продолжающейся технологической гонки между США и Китаем инвестиции Baidu в ИИ и его развитие привлекают всё больше внимания.

По данным Reuters, Baidu сослался на результаты испытаний, проведенных China Science Daily с использованием наборов данных AGIEval и C-Eval — двух эталонных тестов, используемых для оценки производительности моделей ИИ.

К гонке разработок искусственного интеллекта в Китае теперь присоединились три «гиганта»: Tencent, Alibaba и Baidu.

Эрни 3.5 продемонстрировал выдающиеся способности на экзамене по китайскому языку, содержание которого основано на вступительных экзаменах и тестах на определение уровня владения языком, таких как вступительные экзамены в колледж или экзамены на право заниматься адвокатской деятельностью.

В другом китайском тесте, включавшем 13 000 вопросов с вариантами ответов, охватывающих 50 различных тем, Ernie 3.5 продолжил превосходить двух конкурентов OpenAI. Однако при прохождении третьего теста, разработанного группой университетов США, включавшего вопросы по науке и обществу, Ernie 3.5 полностью уступил ChatGPT и GPT 4.

Всего через три месяца после выпуска бета-версии Ernie Bot, большой языковой модели (LLM) Baidu, построенной на Ernie 3.0, Ernie 3.5 достигла улучшений в эффективности, функциональности и производительности, заявил технический директор Baidu Хайфэн Ван. Эти улучшения заметны в написании текстов, ответах на запросы, рассуждениях и генерации кода, а также в эффективности обучения и вывода, добавил технический директор.

Baidu также заявила, что новая модель будет поддерживать плагины Baidu и сторонних разработчиков. Компания заявила, что плагин «Baidu Search» интегрирован и позволит Ernie Bot генерировать точную информацию в режиме реального времени. Плагины — это дополнительные приложения, которые позволяют ИИ работать в определённых ситуациях, например, резюмировать длинные тексты и генерировать более точные ответы.

По данным июньского исследования, проведённого агентством «Синьхуа», бот Ernie Bot от Baidu занял первое место среди «китайских чат-платформ». Baidu стремится интегрировать Ernie Bot в другие продукты, такие как облачные сервисы, и объявила о создании венчурного фонда на сумму 139 миллионов долларов для инвестиций в китайские стартапы в области генеративного ИИ, сообщает SCMP .

По словам генерального директора и соучредителя Baidu Робина Ли, можно предвидеть, что большие языковые модели будут все больше проникать в новые области, становясь ключевым фактором развития цифровой экономики .

Ссылка на источник: https://thanhnien.vn/chatgpt-thua-chatbot-baidu-o-diem-nao-185230628031408823.htm