Motivado por su preocupación por las dificultades que enfrentan las personas con discapacidad visual y auditiva en su vida diaria, Phan Hai Dang, un estudiante de la escuela secundaria para superdotados Luong The Vinh (provincia de Dong Nai ), investigó y desarrolló una aplicación llamada "Sistema multifuncional para apoyar a los sordos y ciegos utilizando tecnología de aprendizaje profundo".

Phan Hai Dang, estudiante de la Escuela Secundaria para Talentosos Luong The Vinh (provincia de Dong Nai), presenta su solicitud. Foto: AX
Aunque no cursó una carrera especializada en informática, Dang siente una pasión particular por la programación, en especial por la tecnología de aprendizaje profundo. A diferencia de muchos otros jóvenes que optan por desarrollar aplicaciones de entretenimiento o educativas, Dang eligió un camino más desafiante: crear aplicaciones para ayudar a las personas sordas y ciegas a comunicarse e integrarse en la comunidad.
La aplicación desarrollada por Dang es capaz de convertir el lenguaje de señas en texto y voz, y transformar el lenguaje hablado en el texto o las señas correspondientes, facilitando la interacción entre ambas partes. El sistema integra diversas tecnologías de IA, como el algoritmo Yolv8, el reconocimiento facial ArcFace y el reconocimiento óptico de caracteres (OCR), entre otras.
Simplemente toque el ícono del micrófono y haga clic en "Hablar". La aplicación grabará su discurso y mostrará un videotutorial en lenguaje de señas apropiado. Las personas sordas pueden ver este video para comprender el mensaje visualmente. Por otro lado, la cámara grabará los gestos de las manos del usuario, los convertirá en texto y los reproducirá como audio para que las personas oyentes puedan comprenderlos.
"La aplicación también puede reconocer emociones a través del contacto visual y las expresiones faciales para reflejar con precisión la actitud de la persona que se comunica, aumentando así la efectividad de la interacción y la conexión en la sociedad", compartió Dang.
Para usuarios con discapacidad visual, el sistema de asistencia a la navegación utiliza una cámara integrada para identificar objetos frontales, medir distancias y emitir avisos sonoros para ayudar a los usuarios a evitar colisiones al conducir. Además, el reconocimiento facial permite identificar a seres queridos y realizar llamadas de emergencia a través del Asistente de Google mediante comandos de voz.
Además, la aplicación integra muchas funciones de soporte práctico como reconocimiento de semáforos, lectura de denominación de moneda, lectura de libros, seguimiento de ubicación, etc.
Detrás del viaje de Dang para acercar la tecnología a las personas con discapacidad está el apoyo dedicado de su maestro, Bui Kim Minh, quien guió, inspiró y abrió directamente la puerta a aplicaciones prácticas para este estudiante amante de la programación.
Según el Sr. Minh, desde el momento en que Dang concibió la idea de una aplicación de IA para facilitar la comunicación de personas con discapacidad, vio el potencial creativo del proyecto. En lugar de limitarse a la teoría, se puso en contacto proactivamente con el Centro para la Educación de Niños con Discapacidad de la provincia de Dong Nai para adquirir experiencia práctica.
"Creo que, para que la tecnología tenga un valor real, debe probarse en situaciones reales donde los usuarios realmente la necesiten. Como profesor, apoyo y conecto a Dang con la tecnología que creó para que pueda aplicarla en la práctica", compartió el Sr. Minh.

Profesores de la Escuela Secundaria para Talentosos Luong The Vinh felicitan a Hai Dang por ganar el primer premio provincial y el tercer premio nacional. Foto: AX
En el Centro Provincial de Educación para Niños con Discapacidad de Dong Nai, tanto profesores como alumnos dedicaron semanas a escuchar, observar, experimentar y realizar ajustes. Las versiones, que se actualizaban continuamente, se mejoraron con base en los comentarios de los niños con discapacidad y de quienes experimentaron directamente el producto.
Tras numerosas pruebas, evaluaciones y mejoras, el sistema alcanza ahora una precisión de aproximadamente el 95 % en el reconocimiento de lengua de señas. Para el Sr. Minh, la alegría no reside en los premios ni el reconocimiento, sino en ver a sus alumnos madurar en su pensamiento y acción.
"Enseñar a un estudiante a usar la tecnología no es difícil. Pero enseñarle a usarla para servir a la comunidad es el objetivo principal de los educadores ", enfatizó el Sr. Minh.
Con su idea de aplicar la tecnología de Deep Learning para convertir el lenguaje de señas en habla y viceversa, Dang ganó excelentemente el primer premio a nivel provincial y el tercer premio a nivel nacional en la competencia de Ciencia y Tecnología para estudiantes de secundaria.

Una estudiante de una Aldea Infantil SOS gana una beca excepcional y se gradúa de la universidad con honores. Al crecer en la Aldea Infantil SOS de Hai Phong, Phuong Anh nunca se sintió miserable ni digna de lástima. A los 18 años, Phuong Anh ganó una beca excepcional y se graduó de la universidad con honores.
Fuente: https://vietnamnet.vn/nam-sinh-o-dong-nai-gianh-giai-quoc-gia-voi-ung-dung-ho-tro-nguoi-khuyet-tat-2490981.html






Kommentar (0)