Tangkapan muka VKIST: Perisian pengumpulan data imej muka berbilang sudut untuk penyelidikan dan pembangunan AI

Dalam konteks teknologi pengecaman muka dan pemodelan muka 3D yang semakin meluas digunakan dalam banyak bidang seperti keselamatan, penjagaan kesihatan , e-dagang, keselamatan peribadi, keperluan untuk membina pangkalan data imej muka yang tersusun, pelbagai dan berskala besar semakin mendesak. Salah satu cabaran utama hari ini ialah cara mengumpul data imej dengan kualiti yang konsisten, di bawah keadaan pencahayaan yang berbeza dan pada banyak sudut penangkapan, sambil memastikan ketepatan dalam klasifikasi dan penyimpanan data.

Untuk menyelesaikan masalah ini, pasukan penyelidik di Institut Sains dan Teknologi Vietnam - Korea (VKIST) telah membangunkan perisian tangkapan muka VKIST, alat yang menyokong kawalan serentak sistem yang terdiri daripada berbilang kamera digital dan modul pencahayaan, membolehkan pengumpulan, pelabelan dan penyimpanan data imej muka dalam masa nyata.

Pengumpulan data imej wajah dan penyelesaian pemprosesan

Tangkapan muka VKIST diprogramkan dalam bahasa C#, menampilkan antara muka mesra dalam bahasa Vietnam, mudah disepadukan dan dikembangkan.

Tangkapan muka VKIST membolehkan kawalan jauh kamera DSLR Nikon dan Canon yang popular seperti 5DmarkII, 5DMarkIII, 6DMarkII, 1500D, 2000D, D60, D3000, D5100, D7100, D4, D800..., melalui antara muka USB dan protokol RS232. Pengguna boleh melakukan operasi seperti melihat imej langsung (Pandangan Langsung), melaraskan parameter teknikal (apertur, kelajuan pengatup, ISO), mengarahkan tangkapan foto serentak dan memindahkan foto ke komputer dalam masa nyata.

Khususnya, perisian ini menyokong kawalan serentak berbilang kamera - ciri penting dalam sistem pengumpulan data imej berbilang sudut. Antara muka perisian adalah dalam bahasa Vietnam, direka bentuk dalam blok berfungsi yang berasingan untuk kemudahan penggunaan dan penyepaduan mudah ke dalam sistem yang kompleks.

Antara muka perisian tangkapan muka VKIST (Rajah 1) dibahagikan kepada blok berasingan dengan fungsi yang diterangkan dalam Rajah 2. Bahasa yang dipaparkan dalam perisian adalah bahasa Vietnam.

Antara muka perisian penangkapan muka VKIST.

Gambar rajah blok fungsi utama perisian.

Tangkapan muka VKIST juga menyepadukan keupayaan untuk mengawal keamatan cahaya sistem pencahayaan dengan menghantar data daripada fail konfigurasi ke litar kawalan cahaya. Terima kasih kepada itu, persekitaran pencahayaan semasa proses penggambaran dikawal dengan tepat, memastikan kualiti imej yang konsisten, yang merupakan faktor utama dalam aplikasi AI.

Selain itu, fungsi kawalan keamatan cahaya juga disepadukan ke dalam perisian ini. Pengguna hanya perlu memasukkan fail parameter keamatan cahaya yang tersedia, kemudian gunakan perisian untuk membaca data dan menghantar parameter ke litar kawalan keamatan cahaya. Dari situ, kawal jumlah cahaya di persekitaran sekeliling dengan tepat.

Sorotan lain ialah keupayaan untuk melabel data secara automatik mengikut struktur, menjadikan proses mengurus, mendapatkan semula dan melatih model AI lebih cekap. Perisian ini menyokong pilihan mod penyimpanan data (secara tempatan pada kamera, disimpan ke komputer) dan klasifikasi data mengikut senario yang telah ditetapkan.

Satu lagi ciri yang luar biasa ialah keupayaan untuk melabelkan imej secara automatik mengikut struktur yang telah ditetapkan, yang menjimatkan masa pengelasan manual dengan ketara. Tangkapan muka VKIST membolehkan mengkonfigurasi cara menyimpan imej: Mengikut folder, mengikut objek, mengikut jenis ekspresi atau variasi lain seperti memakai cermin mata, memakai topeng, menukar gaya rambut...

Selain itu, perisian ini juga menyokong berbilang mod penjimatan data - termasuk rakaman berurutan, menulis ganti atau menyimpan pada kamera sebelum dipindahkan ke pelayan. Ini membantu sistem menjadi fleksibel dalam mengendalikan sejumlah besar imej, meminimumkan risiko kehilangan data atau kesesakan semasa operasi.

Platform penyelidikan kecerdasan buatan dan pembinaan pangkalan data muka berskala besar

Perisian ini sedang digunakan dalam sistem pengumpulan data imej muka yang digunakan oleh VKIST, yang merangkumi 33 kamera DSLR Canon, 20 modul pencahayaan boleh laras, bingkai besi untuk meletakkan kamera dan pencahayaan di sekeliling hemisfera, dan tiga PC berkuasa dengan monitor dan perisian kawalan sistem. Dengan sistem ini, Makmal Bersama/Jabatan Teknologi Maklumat VKIST-Nacentech, VKIST telah mengumpul dan membina pangkalan data imej muka kira-kira 500 orang (kira-kira 5 juta foto) dan terus mengumpul lebih banyak data.

*Sampel data imej muka berbilang sudut telah dilakukan oleh perisian tangkapan muka VKIST.*

Perisian ini telah digunakan dalam projek kerjasama dengan Institut Sains dan Teknologi Korea (KIST) untuk mengumpul data imej muka lebih daripada 1,000 orang Vietnam. Pangkalan data ini merangkumi kira-kira 10 juta foto dengan ekspresi muka yang berbeza seperti biasa, gembira, sedih, takut, marah, terkejut, jengkel dan aksesori yang dikaburkan seperti topeng, cermin mata, topi, rambut palsu dalam keadaan pencahayaan yang berbeza.

*Antara muka perisian dengan spesifikasi penuh.*

Data yang dikumpul daripada sistem menggunakan perisian tangkapan muka VKIST telah dan sedang digunakan dalam pelbagai arah penyelidikan dan pembangunan teknologi:

Pemodelan muka 3D daripada foto 2D berbilang sudut,

Tingkatkan ketepatan teknologi pengecaman muka dalam keadaan cacat (kekaburan, pencahayaan kompleks),

Ukiran laser 3D muka pada kaca sebagai cenderahati,

Membina semula imej wajah orang yang telah meninggal dunia daripada gambar lama, berkhidmat untuk tujuan penyimpanan budaya dan warisan,

Aplikasi dalam e-dagang, estetika perubatan, realiti tambahan.

Pembangunan dan aplikasi tangkapan muka VKIST bukan sahaja membantu VKIST mengambil inisiatif dalam membina pangkalan data yang besar tetapi juga menyumbang kepada peningkatan kapasiti penyelidikan tentang penglihatan komputer dan kecerdasan buatan di Vietnam - kawasan teras dalam revolusi perindustrian keempat.

Menguasai dan menguasai teknologi perisian untuk mengawal sistem perkakasan khusus - terutamanya sistem optik berbilang peranti - memainkan peranan penting dalam membina platform AI domestik yang sesuai untuk ciri antropometri orang Vietnam.

Tangkapan muka VKIST ialah demonstrasi pembangunan alatan perisian berteknologi tinggi untuk penyelidikan dan penggunaan sistem penglihatan komputer di Vietnam. Menguasai teknologi mengawal dan menyegerakkan sistem pengumpulan data imej berskala besar akan menjadi asas penting untuk membantu menggalakkan kapasiti membangunkan kecerdasan buatan di negara ini, terutamanya dalam bidang yang memerlukan data antropometrik dengan ciri serantau atau etnografi.

Jabatan IT mendaftarkan hak cipta perisian "VKIST face capture" sejurus selepas melengkapkan dan menguji keseluruhan program.

*Sijil pendaftaran hak cipta untuk perisian tangkapan muka VKIST.*

Vietnam - Institut Sains dan Teknologi Korea

Sumber: https://mst.gov.vn/vkist-face-capture-phan-mem-thu-thap-du-lieu-anh-khuon-mat-da-goc-phuc-vu-nghien-cuu-va-phat-trien-ai-197250927011551324.htm