視覚や聴覚に障害のある人々が日常生活で直面する困難に対する懸念から、ドンナイ省のルオン・テー・ヴィン高等学校の生徒であるファン・ハイ・ダンさんは、「ディープラーニング技術を使用して聴覚障害者と視覚障害者を支援する多機能システム」と呼ばれるアプリケーションを研究・開発した。

ドンナイ省ルオン・テー・ヴィン高等学校(Luong The Vinh High School for the Gifted)の生徒、ファン・ハイ・ダンさんが願書を提出する。写真:AX
ダンはコンピュータサイエンスの専門分野出身ではないものの、プログラミング、特にディープラーニング技術に強い情熱を注いでいます。エンターテイメントや教育アプリケーションの開発を選択する多くの若者とは異なり、ダンはより挑戦的な道を選びました。それは、聴覚障害者や視覚障害者がコミュニケーションを取り、地域社会に溶け込むためのアプリケーションを開発することです。
ダン氏が開発したアプリケーションは、手話をテキストと音声に変換し、音声を対応するテキストまたは手話に変換する機能を備えており、両者間のスムーズなインタラクションを実現します。このシステムは、Yolv8アルゴリズム、ArcFace顔認識、光学式文字認識(OCR)などの様々なAI技術を統合しています。
マイクアイコンをタップして「話す」をクリックするだけで、アプリがあなたの音声を録音し、適切な手話を使ったビデオチュートリアルを表示します。聴覚障がいのある方は、このビデオを見てメッセージを視覚的に理解できます。また、カメラがユーザーの手振りを録音し、テキストに変換して音声として再生するので、健聴者にも理解していただけます。
「このアプリケーションは、アイコンタクトや表情から感情も認識し、コミュニケーションをとる相手の態度を正確に反映することで、社会における交流やつながりの有効性を高めることができます」とダン氏は語った。
視覚障がいのあるユーザー向けに、ナビゲーション支援システムは内蔵カメラを使用して前方の物体を識別し、距離を測定し、音声警告を発することで、運転中の衝突回避を支援します。さらに、顔認識機能により、ユーザーは大切な人を認識し、音声コマンドでGoogleアシスタント経由で緊急通報を行うことができます。
さらに、このアプリケーションには、信号機の認識、通貨の額面の読み取り、本の読み取り、位置の追跡など、多くの実用的なサポート機能が統合されています。
障害を持つ人々にテクノロジーを届けようとするダンさんの道のりの背後には、プログラミングを愛するこの生徒を直接指導し、刺激を与え、実用的なアプリケーションへの扉を開いてくれた教師、ブイ・キム・ミンさんの献身的なサポートがありました。
ミン氏によると、ダン氏が障がい者のコミュニケーションを支援するAIアプリケーションのアイデアを思いついた瞬間から、ミン氏はこのプロジェクトの創造的な可能性を見出しました。理論だけにとどまらず、実践的な経験を積むために、ドンナイ省の障がい児教育センターと積極的に連携しました。
「テクノロジーに真の価値を持たせたいなら、ユーザーが実際に必要とする現実世界の状況で検証されなければならないと私は信じています。私自身も教師として、ダン氏が開発したテクノロジーを実践で活用できるよう、彼と繋がるサポートをしています」とミン氏は語りました。

ルオン・テー・ヴィン高等英才学校の教師たちが、ハイ・ダンさんが省レベルで第1位、全国レベルで第3位を獲得したことを祝福している。写真:AX
ドンナイ省障害児教育センターでは、教師と生徒が数週間かけて、聞き取り、観察し、実験し、調整を重ねました。障害のある子どもたちや製品を直接体験した人々からのフィードバックに基づき、継続的にバージョンアップが行われ、改善が進められました。
幾度もの試行、評価、改良を経て、このシステムは現在、手話認識の精度が約95%に達しています。ミン氏にとって喜びは賞や表彰ではなく、生徒たちの思考と行動が成熟していくのを見る瞬間にあります。
「生徒にテクノロジーの使い方を教えることは難しくありません。しかし、テクノロジーを地域社会に貢献するためにどのように活用するかを教えること、それが教育者の究極の目標なのです」とミン氏は強調した。
ディープラーニング技術を応用して手話を音声に変換したり、音声を手話に変換したりするアイデアで、ダンさんは高校生の科学技術コンテストで省レベルで第1位、全国レベルで第3位という素晴らしい成績を収めました。

SOS子どもの村の女子生徒が、稀有な奨学金を獲得し、大学を優秀な成績で卒業しました。ハイフォンのSOS子どもの村で育ったフォン・アンさんは、惨めさや哀れみを感じたことは一度もありませんでした。18歳で稀有な奨学金を獲得し、その後、大学を優秀な成績で卒業しました。
出典: https://vietnamnet.vn/nam-sinh-o-dong-nai-gianh-giai-quoc-gia-voi-ung-dung-ho-tro-nguoi-khuyet-tat-2490981.html






コメント (0)