Pelajar Universiti Teknologi Ho Chi Minh City membuat permainan pemulihan tangan

Permainan video, yang dibangunkan oleh sekumpulan pelajar, menggunakan kecerdasan buatan untuk mengenali gerak isyarat tangan dan menyokong pemulihan untuk bahagian ini.

Kumpulan penyelidik (BK Hand Rehab), Jabatan Sains Komputer, Universiti Teknologi Ho Chi Minh City, mula membina sistem pengecaman isyarat tangan untuk permainan video mulai Ogos 2022. Kumpulan itu secara beransur-ansur meningkatkan sistem itu kepada permainan komputer untuk membantu memulihkan dan merawat fungsi tangan.

Vo Ngoc Sang, ahli pasukan penyelidik, berkata permainan BK Hand Rehab sedang dibangunkan untuk memberi tumpuan kepada menyokong pemulihan pergelangan tangan, tangan dan jari.

Permainan ini direka bentuk dan dikendalikan melalui komputer dan peranti penderia Leap Motion Controller. Pada mulanya, pemain dikehendaki melakukan isyarat tangan mengikut arahan dalam setiap permainan. Penderia mampu menerima dan mengenali maklumat tentang lokasi titik tertentu di tangan. Dari situ, pasukan menggunakan algoritma kecerdasan buatan (AI) untuk menjana bentuk tangan dan gerak isyarat yang sepadan, mencipta tindakan dalam permainan.

Pelajar mereka bentuk permainan video untuk memulihkan fungsi tangan — Permainan ini membantu pengguna mempunyai refleks tangan yang fleksibel. Video : *Pasukan penyelidik*

Sistem permainan direka bentuk dengan struktur hierarki mengikut tahap, bermakna bagi setiap permainan, pemain akan mengalami daripada tahap yang mudah kepada yang sukar, mencipta pengalaman yang lebih mencabar. Permainan ini sesuai untuk banyak subjek yang berbeza seperti orang tua, orang kurang upaya atau mereka yang mengalami kecederaan tangan yang berada di peringkat terapi fizikal. Terima kasih kepada pengecaman isyarat tangan untuk berinteraksi dengan permainan, pesakit yang menjalani terapi fizikal boleh berlatih dan berehat untuk mewujudkan perasaan selesa.

Biasanya, pesakit yang memerlukan pemulihan tangan akan mengamalkan senaman mekanikal yang mudah, atau dengan sokongan jururawat atau doktor. Penyelesaian pasukan adalah berdasarkan permainan video, menjadikan proses pemulihan lebih menarik dan kurang membosankan.

BK Hand Rehab kini menawarkan 3 permainan asas. Pemain boleh berlatih melalui permainan statik (pilih bentuk dan warna) atau permainan dinamik (gerakkan objek untuk menangkap item yang jatuh atau mengawal untuk mengelakkan halangan).

Permainan ini dibangunkan oleh pasukan mengikut proses lima langkah: idea, reka bentuk, penghalusan, ujian dan penggunaan. Bagi gerak isyarat tangan yang dipilih untuk setiap permainan, pasukan merujuk penyelidikan daripada organisasi berprestij seperti Universiti Harvard dan Perkhidmatan Kesihatan Kebangsaan Kerajaan Scotland.

Untuk berlatih melalui permainan, pengguna memerlukan dirian tangan, komputer dan penderia Leap Motion Controller. Pengguna dibimbing melalui pergerakan tertentu bergantung pada genre permainan dan berdasarkan situasi, mereka akan memutuskan pergerakan yang hendak dilakukan untuk berinteraksi dengan konteks yang sepadan.

Pengguna mengalami permainan dalam kehidupan sebenar. Foto: Pasukan penyelidik — Pengguna mengalami permainan dalam kehidupan sebenar. Foto: *Pasukan penyelidik*

Sesetengah pengguna mengalami penilaian produk, latihan dalam bentuk permainan diperkemas, selesa, mudah dipasang dan digunakan. Pasukan itu merancang untuk menyelidik kaedah lain untuk meningkatkan ketepatan pengecaman isyarat tangan dan pergerakan yang lebih sukar. Pada masa yang sama, permainan perlu dipertingkatkan dari segi grafik dan mekanik untuk menambah pengalaman pengguna.

Profesor Madya, Dr Quan Thanh Tho, Timbalan Ketua Fakulti Sains Komputer dan Kejuruteraan, Universiti Teknologi (VNU-HCM), pengajar, menilai bahawa BK Hand Rehab menawarkan penyelesaian yang luar biasa berbanding kaedah terapi tangan tradisional, berkat mencipta pengalaman pemulihan yang menyeronokkan, mengurangkan kebosanan, membantu menjimatkan kos dan tidak memerlukan pesakit untuk pergi ke kemudahan perubatan.

Profesor Madya Tho berkata projek itu mempunyai potensi besar walaupun penggunaan permainan video untuk menyokong pemulihan tangan bukanlah idea baharu, malah telah disebut dan direalisasikan dalam banyak kajian lepas. Walau bagaimanapun, kajian terdahulu masih mempunyai banyak batasan seperti memilih pergerakan yang tidak sesuai untuk permainan, dan langkah pengecaman isyarat tangan belum mencapai ketepatan dan kelajuan yang diharapkan. “BK Hand Rehab telah menyelesaikan banyak masalah yang dihadapi oleh kajian lepas,” katanya.

Beliau juga menambah bahawa, melalui maklum balas kehidupan sebenar daripada pengguna, permainan itu perlu disesuaikan untuk disesuaikan dengan pesakit. Kedua, pasukan memerlukan pengiktirafan keberkesanan penyelesaian daripada pakar terapi fizikal. "Ini adalah perkara-perkara yang perlu diselesaikan," katanya sambil menambah bahawa dia bekerjasama dengan Jabatan Sains Komputer dan Kejuruteraan untuk menyokong pasukan itu berhubung dengan pusat perubatan dan hospital ortopedik, dengan tujuan menjalankan penyelidikan yang diperlukan.

Projek Pemulihan Tangan baru-baru ini memenangi hadiah pertama dalam pertandingan Inisiatif Komuniti 2023 yang dianjurkan oleh organisasi bukan untung Yayasan SonTa.