Робот с искусственным интеллектом делает прогнозы и улыбается одновременно с человеком напротив

Американский робот Эмо может предсказывать улыбку примерно за 840 миллисекунд до того, как улыбнется человек напротив, и улыбаться в то же время.

Люди привыкают к роботам, способным свободно общаться с помощью речи, отчасти благодаря достижениям в области крупных языковых моделей, таких как ChatGPT, но их навыки невербального общения, особенно мимика, всё ещё значительно отстают. Разработка робота, который не только может выражать разнообразные выражения лица, но и умеет делать это в нужный момент, чрезвычайно сложна.

Лаборатория Creative Machines в Инженерной школе Колумбийского университета работает над этой проблемой уже более пяти лет. В новом исследовании, опубликованном в журнале Science Robotics , команда представила Emo — робота с искусственным интеллектом, который может предсказывать выражения лица человека и воспроизводить их в режиме реального времени, как сообщил TechXplore 27 марта. Он предсказывает улыбку примерно за 840 миллисекунд до того, как человек улыбнётся, и улыбается в нужный момент.

Эмо — гуманоидный робот с лицом, оснащённым 26 приводами, которые обеспечивают широкий спектр выражений. Голова робота покрыта мягкой силиконовой кожей с системой магнитных соединений, что позволяет быстро настраивать и обслуживать его. Для более полного погружения команда встроила камеры высокого разрешения в зрачки каждого глаза, что позволяет Эмо взаимодействовать с глазами, что важно для невербальной коммуникации.

Команда разработала две модели искусственного интеллекта. Первая модель предсказывала выражения человеческого лица, анализируя едва заметные изменения на противоположном лице, а вторая генерировала двигательные команды, используя соответствующие выражения.

Чтобы научить робота выражать эмоции, команда поместила Эмо перед камерой и заставила его совершать случайные движения. Через несколько часов робот усвоил взаимосвязь между выражением лица и двигательными командами — подобно тому, как люди отрабатывают выражения лица, глядя в зеркало. Команда называет это «самомоделированием» — аналогично тому, как люди представляют себе, как они выражают определённые эмоции.

Затем команда включила видеозаписи выражений лиц людей, чтобы Эмо мог наблюдать их покадрово. После нескольких часов обучения Эмо научился предсказывать выражение лица, наблюдая за едва заметными изменениями на лице человека, когда тот начинал улыбаться.

«Я считаю, что точное предсказание выражений человеческого лица — это революция в области взаимодействия человека и робота. Раньше роботы не были разработаны для того, чтобы учитывать выражение лица человека во время взаимодействия. Теперь роботы могут интегрировать выражения лица для реагирования», — сказал Юйхан Ху, аспирант Лаборатории креативных машин и член исследовательской группы.

«Когда роботы реагируют на эмоции одновременно с людьми в режиме реального времени, это не только улучшает качество взаимодействия, но и способствует укреплению доверия между людьми и роботами. В будущем, взаимодействуя с роботом, он будет наблюдать и интерпретировать вашу мимику, как настоящий человек», — добавил Ху.

Тху Тао (по данным TechXplore )

Ссылка на источник