동나이성 출신의 한 남학생이 장애인 지원 관련 공약으로 전국상을 수상했다.

동나이에 사는 한 남학생이 장애인의 사회 통합을 돕고자 하는 열망에 힘입어 시각 및 청각 장애인이 안전하게 소통하고 이동할 수 있도록 지원하는 애플리케이션을 개발했습니다.

동나이 성 르엉 테 빈 영재 고등학교 학생인 판 하이 당은 시각 및 청각 장애인들이 일상생활에서 겪는 어려움에 대한 우려를 바탕으로 "딥러닝 기술을 활용한 시각 및 청각 장애인 지원 다기능 시스템"이라는 애플리케이션을 연구 개발했습니다.

동나이성 루옹 테 빈 영재고등학교 학생인 판 하이 당이 지원서를 제출하고 있다. 사진: AX

컴퓨터 공학 전문 학위 과정을 밟지는 않았지만, 당은 프로그래밍, 특히 딥러닝 기술에 남다른 열정을 가지고 있습니다. 오락이나 교육용 애플리케이션 개발을 선택하는 많은 젊은이들과 달리, 당은 청각 장애인과 시각 장애인이 소통하고 사회에 통합될 수 있도록 돕는 애플리케이션을 개발하는 더욱 도전적인 길을 택했습니다.

Dang이 개발한 애플리케이션은 수화를 텍스트와 음성으로 변환하고, 음성을 해당 텍스트나 수화로 변환하여 양측 간의 원활한 상호 작용을 지원합니다. 이 시스템은 Yolv8 알고리즘, ArcFace 얼굴 인식, 광학 문자 인식(OCR) 등 다양한 인공지능 기술을 통합하고 있습니다.

마이크 아이콘을 탭하고 "말하기"를 클릭하면 앱이 사용자의 음성을 녹음한 후 적절한 수화를 사용한 비디오 튜토리얼을 표시합니다. 청각 장애 사용자는 이 비디오를 시청하여 메시지를 시각적으로 이해할 수 있습니다. 반대로, 카메라가 사용자의 손동작을 녹화하여 텍스트로 변환한 후 음성으로 재생하여 청각 장애가 없는 사용자가 내용을 이해할 수 있도록 합니다.

"이 애플리케이션은 눈맞춤과 얼굴 표정을 통해 감정을 인식하여 소통하는 사람의 태도를 정확하게 반영함으로써 사회적 상호작용과 연결의 효율성을 높일 수 있습니다."라고 당 씨는 밝혔습니다.

시각 장애가 있는 사용자를 위해 내비게이션 보조 시스템은 내장 카메라를 사용하여 전방의 물체를 식별하고 거리를 측정하며, 운전 중 충돌을 방지할 수 있도록 음성 경고를 제공합니다. 또한, 얼굴 인식 기능을 통해 사용자는 음성 명령으로 Google 어시스턴트를 사용하여 가족 구성원을 식별하고 긴급 전화를 걸 수 있습니다.

또한, 이 애플리케이션은 신호등 인식, 화폐 단위 인식, 책 읽기, 위치 추적 등과 같은 다양한 실용적인 지원 기능을 통합하고 있습니다.

장애인들에게 기술을 더 가까이 가져다주는 여정을 이어가는 당의 뒤에는 그의 스승인 부이 킴 민의 헌신적인 지원이 있습니다. 부이 킴 민 스승은 프로그래밍을 좋아하는 당에게 직접적인 지도와 영감을 주었고, 실질적인 응용 분야로 나아갈 수 있는 길을 열어주었습니다.

민 씨에 따르면, 당 씨가 장애인의 의사소통을 지원하는 AI 애플리케이션 아이디어를 처음 구상했을 때부터 민 씨는 이 프로젝트의 창의적인 잠재력을 알아보았다고 합니다. 그는 이론에만 머무르지 않고, 실질적인 경험을 쌓기 위해 적극적으로 동나이성 장애아동교육센터와 접촉했습니다.

"기술이 진정한 가치를 가지려면 사용자들이 실제로 필요로 하는 현실 세계에서 검증되어야 한다고 생각합니다. 저 또한 교사로서 당이 개발한 기술을 실생활에 적용할 수 있도록 지원하고 있습니다."라고 민 씨는 말했습니다.

르엉 테 빈 영재 고등학교 교사들이 하이 당 학생의 도 대회 1위, 전국 대회 3위 수상을 축하하고 있다. 사진: AX

동나이성 장애아동교육센터에서는 교사와 학생들이 몇 주 동안 경청하고, 관찰하고, 실험하고, 수정하는 과정을 거쳤습니다. 장애아동과 직접 사용해본 사람들의 피드백을 바탕으로 지속적으로 업데이트된 버전이 개선되었습니다.

수많은 시행착오와 평가, 개선을 거쳐 이제 이 시스템은 수화 인식에서 약 95%의 정확도를 달성합니다. 민 선생님에게 진정한 기쁨은 상이나 인정이 아니라, 학생들이 사고와 행동 면에서 성숙해가는 모습을 지켜보는 데 있습니다.

"학생들에게 기술 사용법을 가르치는 것은 어렵지 않습니다. 하지만 학생들이 기술을 활용하여 지역사회에 봉사하는 방법을 가르치는 것, 그것이 바로 교육자 들의 궁극적인 목표입니다."라고 민 씨는 강조했습니다.

당 씨는 딥러닝 기술을 활용하여 수화를 음성으로, 음성을 수화로 변환하는 아이디어를 통해 고등학생 과학기술 경진대회에서 지방 대회 1등상과 전국 대회 3등상을 수상하는 뛰어난 성과를 거두었습니다.

SOS 어린이 마을 출신의 한 여학생이 보기 드문 장학금을 받고 대학을 우등으로 졸업했습니다. 하이퐁의 SOS 어린이 마을에서 자란 푸옹 안은 단 한 번도 불행이나 가련함을 느껴본 적이 없었습니다. 18세에 푸옹 안은 보기 드문 장학금을 받게 되었고, 대학을 우등으로 졸업했습니다.

출처: https://vietnamnet.vn/nam-sinh-o-dong-nai-gianh-giai-quoc-gia-voi-ung-dung-ho-tro-nguoi-khuyet-tat-2490981.html