PERANCANGAN GESTURE RECOGNITION DENGAN ANIMASI MENGGUNAKAN UNITY 3D DAN KINECT UNTUK KENDALI PERANGKAT ELEKTRONIKA

Abstract

Gerakan tubuh adalah salah satu cara komunikasi dalam kehidupan sehari-hari. Menurut para ahli, 70% komunikasi manusia dilakukan dengan gesture atau gerakan.

Dengan perkembangan teknologi saat ini, gerakan tidak hanya digunakan untuk komunikasi secara non-verbal, namun sudah dikembangkan menjadi berbagai jenis teknologi baru seperti Game berbasis Virtual Reality dan media pembelajaran. pengenalan gerakan bertujuan untuk sistem kendali elektronika dengan menggunakan sensor depth kinect dan skeleton tracking yang terdapat pada mesin Unity3D. Proses tersebut dimulai dengan pendeteksian skeleton dari user melalui kinect. Selanjutnya diolah oleh mesin Unity3D kemudian diklasifikasi menggunakan Hidden Markov Model. Setelah proses klasifikasi berhasil, selanjutnya hasil gerakan diintegrasikan dengan mikrokontroler arduino dan relay untuk proses indikasi output berupa mati dan hidup perangkat elektronika/ lampu. Dari percobaan yang dilakukan, metode HMM sangat membantu proses identifikasi gerakan dengan akurasi sebesar 95.31%, sedangkan pengaruh kinect terhadap intensitas cahaya sebesar

83.79 %, dan pengaruh kondisi penghalang mendapat akurasi sebesar 97.22% terakhir adalah kondisi fisik user sebesar 98%.