Ho Chi Minh City Teknoloji Üniversitesi öğrencileri el rehabilitasyon oyunu yaptı

Bir grup öğrencinin geliştirdiği video oyunu, yapay zekâyı kullanarak el hareketlerini tanıyor ve bu bölümdeki rehabilitasyona destek oluyor.

Ho Chi Minh City Teknoloji Üniversitesi Bilgisayar Bilimleri Bölümü'ndeki araştırma grubu (BK Hand Rehab), Ağustos 2022'den itibaren video oyunları için bir el hareketi tanıma sistemi geliştirmeye başladı. Grup, el fonksiyonunu geri kazandırmaya ve tedavi etmeye yardımcı olmak için sistemi kademeli olarak bir bilgisayar oyununa yükseltti.

Araştırma ekibinden Vo Ngoc Sang, BK Hand Rehab'ın oyunlarının bilek, el ve parmakların rehabilitasyonunu desteklemeye odaklanacak şekilde geliştirildiğini söyledi.

Oyun, bir bilgisayar ve bir Leap Motion Controller sensör cihazı aracılığıyla tasarlanıp çalıştırılıyor. Başlangıçta, oyuncuların her oyundaki talimatlara göre el hareketleri yapmaları gerekiyor. Sensör, eldeki belirli noktaların konumu hakkında bilgi alıp tanıyabiliyor. Ardından, ekip yapay zekâ (YZ) algoritmalarını kullanarak karşılık gelen el şekillerini ve hareketlerini üretiyor ve oyunda eylemler oluşturuyor.

Öğrenciler el fonksiyonunu geri kazandırmak için video oyunları tasarlıyor — Oyun, kullanıcıların esnek el reflekslerine sahip olmalarına yardımcı olur. Video : *Araştırma ekibi*

Oyun sistemi, seviyelere göre hiyerarşik bir yapıda tasarlanmıştır; yani oyuncular her oyunda kolaydan zora doğru seviyeler deneyimleyerek daha zorlu deneyimler yaşarlar. Oyun, yaşlılar, engelliler veya fizik tedavi sürecindeki el yaralanmaları olanlar gibi birçok farklı kişi için uygundur. Oyunla etkileşim kurmak için el hareketi tanıma özelliği sayesinde, fizik tedavi gören hastalar pratik yapabilir ve rahatlayarak rahat bir his yaratabilirler.

El rehabilitasyonuna ihtiyaç duyan hastalar genellikle basit mekanik egzersizler yapar veya hemşire ya da doktorların desteğini alırlar. Ekibin çözümü, rehabilitasyon sürecini daha ilgi çekici ve daha az sıkıcı hale getiren video oyunlarına dayanmaktadır.

BK Hand Rehab şu anda 3 temel oyun sunuyor. Oyuncular, statik oyunlar (şekil ve renk seçme) veya dinamik oyunlar (düşen nesneleri yakalamak için nesneleri hareket ettirme veya engellerden kaçınmak için kontrol etme) ile pratik yapabilirler.

Oyunlar, ekip tarafından beş aşamalı bir süreç izlenerek geliştiriliyor: fikir oluşturma, tasarım, geliştirme, test etme ve uygulama. Her oyun için seçilen el hareketleri konusunda ekip, Harvard Üniversitesi ve İskoç Hükümeti Ulusal Sağlık Hizmetleri gibi prestijli kuruluşların araştırmalarına başvuruyor.

Oyunlarda pratik yapmak için kullanıcıların bir el üstü duruşuna, bir bilgisayara ve bir Leap Motion Kontrol Cihazı sensörüne ihtiyacı vardır. Kullanıcılar, oyun türüne bağlı olarak belirli hareketler boyunca yönlendirilir ve duruma göre, ilgili bağlamla etkileşim kurmak için hangi hareketleri gerçekleştireceklerine karar verirler.

Kullanıcılar oyunu gerçek hayatta deneyimliyor. Fotoğraf: Araştırma ekibi — Kullanıcılar oyunu gerçek hayatta deneyimliyor. Fotoğraf: *Araştırma ekibi*

Bazı kullanıcılar, ürün değerlendirmesinde oyun formundaki alıştırmaların akıcı, rahat ve kurulumunun ve kullanımının kolay olduğunu belirtti. Ekip, el hareketi tanıma ve daha zor hareketlerin doğruluğunu artırmak için başka yöntemler araştırmayı planlıyor. Aynı zamanda, kullanıcı deneyimini iyileştirmek için oyunların grafik ve mekanik açısından iyileştirilmesi gerekiyor.

Teknoloji Üniversitesi (VNU-HCM) Bilgisayar Bilimleri ve Mühendisliği Fakültesi Dekan Yardımcısı ve Öğretim Görevlisi Doçent Dr. Quan Thanh Tho, BK El Rehabilitasyon Merkezi'nin, keyifli bir iyileşme deneyimi yaratması, can sıkıntısını azaltması, maliyet tasarrufu sağlaması ve hastaların sağlık kuruluşlarına gitmesini gerektirmemesi nedeniyle geleneksel el terapisi yöntemlerine kıyasla olağanüstü bir çözüm sunduğunu belirtti.

Doçent Dr. Tho, video oyunlarının el rehabilitasyonunu desteklemek için kullanılmasının yeni bir fikir olmamasına ve daha önce birçok çalışmada dile getirilip hayata geçirilmesine rağmen projenin büyük bir potansiyele sahip olduğunu söyledi. Ancak, önceki çalışmalarda oyun için uygunsuz hareketlerin seçilmesi gibi birçok sınırlama mevcuttu ve el hareketi tanıma adımı beklenen doğruluk ve hıza ulaşamamıştı. "BK Hand Rehab, önceki çalışmalarda karşılaşılan birçok sorunu çözdü," dedi.

Ayrıca, kullanıcılardan gelen gerçek hayattaki geri bildirimler aracılığıyla oyunun hastalara uyacak şekilde ayarlanması gerektiğini de sözlerine ekledi. İkinci olarak, ekibin çözümün etkinliğinin fizyoterapi uzmanlarından onay alması gerekiyor. "Tamamlanması gereken noktalar bunlar," diyen uzman, gerekli araştırmaları yürütmek amacıyla ekibin tıp merkezleri ve ortopedi hastaneleriyle bağlantı kurmasına destek olmak için Bilgisayar Bilimleri ve Mühendisliği Bölümü ile birlikte çalıştığını da sözlerine ekledi.

El Rehabilitasyon Projesi, kar amacı gütmeyen SonTa Vakfı kuruluşunun düzenlediği 2023 Topluluk Girişimi yarışmasında birincilik ödülünü kazandı.