El videojuego fue desarrollado por un grupo de estudiantes, utilizando inteligencia artificial para reconocer gestos de las manos y apoyar la rehabilitación de esta parte.
El grupo de investigación (BK Hand Rehab), del Departamento de Ciencias de la Computación, de la Universidad Tecnológica de la Ciudad de Ho Chi Minh, comenzó a construir un sistema de reconocimiento de gestos de la mano para videojuegos a partir de agosto de 2022. El grupo actualizó gradualmente el sistema para convertirlo en un juego de computadora para ayudar a restaurar y tratar la función de la mano.
Vo Ngoc Sang, miembro del equipo de investigación, dijo que los juegos de BK Hand Rehab se están desarrollando para centrarse en apoyar la rehabilitación de la muñeca, la mano y los dedos.
El juego está diseñado y operado mediante una computadora y un sensor de control Leap Motion. Inicialmente, los jugadores deben realizar gestos con las manos según las instrucciones de cada juego. El sensor puede recibir y reconocer información sobre la ubicación de ciertos puntos de la mano. A partir de ahí, el equipo utiliza algoritmos de inteligencia artificial (IA) para generar las formas y gestos correspondientes, creando así acciones en el juego.
El juego ayuda a los usuarios a desarrollar reflejos manuales flexibles. Vídeo : Equipo de investigación.
El sistema de juego está diseñado con una estructura jerárquica por niveles, lo que significa que en cada juego, los jugadores experimentarán desde niveles fáciles hasta difíciles, creando experiencias más desafiantes. El juego es adecuado para diversos grupos, como personas mayores, personas con discapacidad o personas con lesiones en las manos que estén en fisioterapia. Gracias al reconocimiento de gestos de la mano para interactuar con el juego, los pacientes en fisioterapia pueden practicar y relajarse para crear una sensación de bienestar.
Normalmente, los pacientes que necesitan recuperar la función de la mano practican ejercicios mecánicos sencillos o cuentan con el apoyo de enfermeras o médicos. La solución del equipo se basa en videojuegos, lo que hace que el proceso de recuperación sea más interesante y menos aburrido.
Actualmente, BK Hand Rehab ofrece tres juegos básicos. Los jugadores pueden practicar con juegos estáticos (elegir formas y colores) o dinámicos (mover objetos para atrapar objetos que caen o controlarlos para evitar obstáculos).
El equipo desarrolla los juegos siguiendo un proceso de cinco pasos: ideación, diseño, perfeccionamiento, pruebas e implementación. Para los gestos manuales seleccionados para cada juego, el equipo consulta investigaciones de prestigiosas organizaciones como la Universidad de Harvard y el Servicio Nacional de Salud del Gobierno de Escocia.
Para practicar mediante juegos, los usuarios necesitan un soporte de manos, una computadora y un sensor de control Leap Motion. Se les guía a través de movimientos específicos según el género del juego y, según la situación, deciden qué movimientos realizar para interactuar con el contexto correspondiente.
Los usuarios experimentan el juego en persona. Foto: Equipo de investigación.
Algunos usuarios que han probado el producto consideran que los ejercicios en forma de juegos son compactos, cómodos y fáciles de instalar y usar. El equipo planea investigar otros métodos para aumentar la precisión del reconocimiento de gestos y movimientos más complejos. Al mismo tiempo, es necesario mejorar los gráficos y la mecánica de los juegos para mejorar la experiencia del usuario.
El profesor asociado, Dr. Quan Thanh Tho, subdirector de la Facultad de Ciencias de la Computación e Ingeniería, Universidad Tecnológica de la Ciudad de Ho Chi Minh (VNU-HCM), instructor, evaluó que BK Hand Rehab ofrece una solución sobresaliente en comparación con los métodos tradicionales de terapia de manos, gracias a la creación de una experiencia de recuperación agradable, la reducción del aburrimiento, la ayuda para ahorrar costos y no requiere que los pacientes viajen a instalaciones médicas.
El profesor asociado Tho afirmó que el proyecto tiene un gran potencial, aunque el uso de videojuegos para apoyar la rehabilitación de la mano no es una idea nueva y se ha mencionado y aplicado en numerosos estudios previos. Sin embargo, estudios previos aún presentan numerosas limitaciones, como la elección de movimientos inapropiados para el juego, y que el reconocimiento de gestos de la mano no ha alcanzado la precisión y velocidad esperadas. «BK Hand Rehab ha resuelto muchos de los problemas que encontraron estudios previos», afirmó.
También añadió que el juego debe ajustarse para adaptarse a los pacientes mediante la retroalimentación de usuarios reales. En segundo lugar, el equipo necesita obtener la validación de los fisioterapeutas sobre la eficacia de la solución. "Estas son las áreas que necesitan mejorarse", afirmó, y añadió que está trabajando con el Departamento de Ciencias de la Computación e Ingeniería para ayudar al equipo a conectarse con centros médicos y hospitales ortopédicos para realizar la investigación necesaria.
El proyecto Hand Rehab ganó recientemente el primer premio en el Concurso de Iniciativa Comunitaria 2023 organizado por la organización sin fines de lucro SonTa Foundation.
Los miembros del equipo recibieron el primer premio en la categoría de aplicación de inteligencia artificial para mejorar la calidad educativa de grupos desfavorecidos. Foto: NVCC
Bich Thao
[anuncio_2]
Enlace de origen
Kommentar (0)