O videogame, desenvolvido por um grupo de estudantes, utiliza inteligência artificial para reconhecer gestos das mãos e auxiliar na reabilitação dessa parte do corpo.
O grupo de pesquisa (BK Hand Rehab), do Departamento de Ciência da Computação da Universidade de Tecnologia da Cidade de Ho Chi Minh, começou a desenvolver um sistema de reconhecimento de gestos das mãos para videogames em agosto de 2022. O grupo gradualmente aprimorou o sistema, transformando-o em um jogo de computador para auxiliar na restauração e no tratamento da função das mãos.
Vo Ngoc Sang, membro da equipe de pesquisa, afirmou que os jogos da BK Hand Rehab estão sendo desenvolvidos com foco no apoio à reabilitação do pulso, da mão e dos dedos.
O jogo é projetado e operado por meio de um computador e um dispositivo sensor Leap Motion Controller. Inicialmente, os jogadores precisam realizar gestos com as mãos de acordo com as instruções de cada jogo. O sensor é capaz de receber e reconhecer informações sobre a localização de certos pontos da mão. A partir daí, a equipe utiliza algoritmos de inteligência artificial (IA) para gerar os formatos e gestos correspondentes das mãos, criando as ações no jogo.
O jogo ajuda os usuários a desenvolverem reflexos manuais flexíveis. Vídeo : Equipe de pesquisa
O sistema de jogo foi projetado com uma estrutura hierárquica por níveis, o que significa que, em cada partida, os jogadores experimentarão níveis que variam do fácil ao difícil, criando experiências cada vez mais desafiadoras. O jogo é adequado para diversos públicos, como idosos, pessoas com deficiência ou aquelas com lesões nas mãos que estão em fase de fisioterapia. Graças ao reconhecimento de gestos com as mãos para interagir com o jogo, os pacientes em fisioterapia podem praticar e relaxar, criando uma sensação de conforto.
Normalmente, pacientes que precisam de reabilitação das mãos praticam exercícios mecânicos simples, com o auxílio de enfermeiros ou médicos. A solução da equipe se baseia em videogames, tornando o processo de reabilitação mais interessante e menos entediante.
A BK Hand Rehab oferece atualmente 3 jogos básicos. Os jogadores podem praticar através de jogos estáticos (escolher formas e cores) ou jogos dinâmicos (mover objetos para apanhar itens que caem ou controlar para evitar obstáculos).
Os jogos são desenvolvidos pela equipe seguindo um processo de cinco etapas: ideação, design, refinamento, teste e implementação. Quanto aos gestos de mão selecionados para cada jogo, a equipe consulta pesquisas de organizações de prestígio, como a Universidade de Harvard e o Serviço Nacional de Saúde do Governo Escocês.
Para praticar através de jogos, os usuários precisam de uma posição de parada de mãos, um computador e um sensor Leap Motion Controller. Os usuários são guiados por movimentos específicos, dependendo do gênero do jogo, e, com base na situação, decidem quais movimentos realizar para interagir com o contexto correspondente.
Os usuários vivenciam o jogo na vida real. Foto: Equipe de pesquisa.
Alguns usuários avaliaram o produto, considerando que os exercícios em formato de jogos são simplificados, confortáveis, fáceis de instalar e usar. A equipe planeja pesquisar outros métodos para aumentar a precisão do reconhecimento de gestos com as mãos e movimentos mais complexos. Ao mesmo tempo, os jogos precisam ser aprimorados em termos de gráficos e mecânicas para melhorar a experiência do usuário.
O Professor Associado, Dr. Quan Thanh Tho, Vice-Chefe da Faculdade de Ciência da Computação e Engenharia da Universidade de Tecnologia (VNU-HCM), instrutor, avaliou que o BK Hand Rehab oferece uma solução excepcional em comparação aos métodos tradicionais de terapia da mão, graças à criação de uma experiência de recuperação agradável, à redução do tédio, à economia de custos e à dispensa de deslocamento dos pacientes até instalações médicas.
O professor associado Tho afirmou que o projeto tem grande potencial, embora o uso de videogames para auxiliar na reabilitação da mão não seja uma ideia nova, tendo sido mencionado e implementado em muitos estudos anteriores. No entanto, esses estudos ainda apresentam muitas limitações, como a escolha de movimentos inadequados para o jogo, e a etapa de reconhecimento de gestos da mão não atingiu a precisão e a velocidade esperadas. "O BK Hand Rehab resolveu muitos problemas encontrados em estudos anteriores", disse ele.
Ele acrescentou ainda que, por meio do feedback de usuários reais, o jogo precisa ser ajustado para atender às necessidades dos pacientes. Em segundo lugar, a equipe precisa do reconhecimento da eficácia da solução por especialistas em fisioterapia. "Esses são os pontos que precisam ser concluídos", disse ele, acrescentando que está trabalhando com o Departamento de Ciência da Computação e Engenharia para apoiar a equipe na conexão com centros médicos e hospitais ortopédicos, com o objetivo de realizar a pesquisa necessária.
O projeto de reabilitação da mão ganhou recentemente o primeiro prêmio no concurso de Iniciativa Comunitária de 2023, organizado pela organização sem fins lucrativos SonTa Foundation.
Os membros da equipe receberam o primeiro prêmio na categoria de aplicação de inteligência artificial para melhorar a qualidade da educação para grupos desfavorecidos. Foto: NVCC
Bich Thao
Link da fonte
Comentário (0)