Искусственный интеллект проникает в мир вьетнамского языка

Искусственный интеллект не только помогает людям изучать языки, но и помогает системам поддерживать более высокий уровень языкового интеллекта.

Использование ИИ для «обучения» вьетнамскому языку

Руководитель предприятия с прямыми иностранными инвестициями (ПИИ) во Вьетнаме хочет быстро выучить вьетнамский язык и научиться читать 90% обычных документов. Проблема в том, что он слишком занят и у него есть всего около часа (с 12 до 13 часов каждый день) на учёбу. Как же применить технологии к программному обеспечению для изучения иностранных языков, чтобы помочь ему быстро освоить иностранные языки?

Выше представлена проблема позиции лидера компании прямых иностранных инвестиций, заданная доценту, доктору Динь Дьену, директору Центра компьютерной лингвистики Научного университета Вьетнамского национального университета в городе Хошимин.

Доцент Дьен, автор множества научных тем и международных публикаций по применению искусственного интеллекта (ИИ) в машинном переводе, критической лингвистике и преподавании вьетнамского языка иностранцам, считает, что применение ИИ крайне необходимо для решения проблем в лингвистике.

В частности, первым шагом в изучении любого языка является обучение его звукам. Препятствием здесь является то, что во вьетнамском языке есть тоны и ритм, и при обучении изучающих нетоновые языки, такие как английский, французский и т. д., это будет очень сложно. Например, вместо того, чтобы спросить: «Ты уже ложился спать?», изучающие будут говорить: «Ты уже ложился спать?», поскольку не различают тоны. Необходимо научить их, как ставить гласные при произношении, как держать рот и чем отличается правильное или неправильное произношение.

В настоящее время прикладное программное обеспечение на основе искусственного интеллекта (ИИ) в преподавании иностранных языков может имитировать форму рта при чистке зубов и воспроизводить звуки, которые учащиеся могут имитировать. Затем учащиеся воспроизводят эти звуки, записывают их в программу и, используя технологию, сравнивают произношение учащегося со стандартным произношением, заданным в программе, что позволяет быстро улучшить произношение. Все вышеперечисленные этапы должны включать ИИ.

Другой пример: согласно «Словарю вьетнамского языка» Института лингвистики под редакцией покойного профессора Хоанг Пхе, исходный вьетнамский словарный запас насчитывает около 34 000 слов. Расчёты показывают, что для того, чтобы машина могла читать около 90% распространённых вьетнамских текстов, необходимо обучить машину примерно 10% слов, что эквивалентно 3400 словам прикладной информации. Чтобы получить эту таблицу данных, доценту Дьену пришлось использовать искусственный интеллект для разметки словарного запаса вьетнамского корпуса.

Можно сказать, что ИИ изменил подход к преподаванию и обучению в сфере образования . Более того, было создано множество приложений на основе искусственного интеллекта, которые помогают ускорить и повысить эффективность процесса обучения.

Приведённая выше интересная история объединения компьютерных наук и лингвистики показывает, что процесс обучения и применения ИИ на практике крайне необходим, но непрост. Данные необходимо разделить на множество уровней идентификации, и на каждом уровне каждая переменная должна обрабатываться с использованием различных специфических идентификаторов.

Когда машины изучают язык...

ИИ не только помогает людям изучать языки, но и улучшает системы, поддерживающие языковой интеллект. Машины обучаются и совершенствуются каждый день.

Подобно истории доцента Дьена, ниже приведен еще один яркий пример того, как интеллектуальный помощник понимает человеческий язык.

Речь идёт о процессе исследования и разработки вьетнамского голосового помощника Kiki для автомобилей, который хорошо распознаёт голоса с различными региональными акцентами. В компьютерных науках распознавание голоса — важная область искусственного интеллекта (ИИ), преобразующая человеческий голос в удобный и понятный формат с помощью компьютерных приложений. Эта технология служит мостом между машинами и людьми. Голосовые помощники стали незаменимыми приложениями во всём мире . Наиболее популярными являются: Siri от Apple, Google Assistant, Amazon Alexa и Kiki во Вьетнаме.

Г-н Нгуен Хоанг Кхань Зуй, написавший первые строки кода для Kiki, рассказал, что для обучения модели ИИ, достаточно интеллектуальной, чтобы распознавать голоса и предоставлять пользователям правильную информацию, ключевую роль играют языковые данные.

Например, для пользователей вьетнамского автомобильного ассистента Kiki очень важна навигация. Поэтому команде разработчиков продукта необходимо подготовить данные и словарь для «плавной» поддержки пользовательских команд. После сбора данных и обучения модели индекс качества распознавания голоса в последней версии улучшился на 40% по сравнению с исходной версией.

Распознавание голоса в автомобилях не ограничивается только задачами навигации и определения местоположения, но также охватывает многие другие вопросы.

Например, использование Kiki в автомобилях требует значительного уровня шума от двигателя, ветра или дорожного оборудования, что напрямую влияет на качество распознавания голоса Kiki в автомобиле. Поэтому команде Kiki необходимо решить проблему шума, уточнив данные, используя речь в шумных условиях, чтобы максимально приблизиться к реальной жизни.

Кроме того, благодаря новым технологиям, таким как самообучение, Kiki пытается «учиться» даже на немаркированных данных, чтобы ещё больше улучшить свою модель. Стабильность работы этого вьетнамского голосового помощника повышается благодаря постоянному обучению и обновлению продукта.

Очевидно, технологический прогресс происходит каждый день, каждый час. ChatGPT, запущенный в конце 2022 года, частично ответил на вопрос о том, как работают большие данные. Технологии «вторгаются» в середину жизни, особенно в образование, языковые технологии и сферы, которые ранее сильно зависели от человека. ИИ меняет то, как мы учимся, работаем, живём... как показано выше.

Источник