PENGGUNAAN GERAK DAN ISYARAT TANGAN SEBAGAI ANTARMUKA PADA APLIKASI PERANGKAT BERGERAK

MUHAMMAD LATHIF PAMBUDI, Drs. Agus Harjoko, M.Sc., Ph.D.

2014 | Skripsi | ILMU KOMPUTER

Bentuk interaksi manusia dengan komputer selalu berkembang dari masa ke masa. Diawali dengan interaksi menggunakan antarmuka berbasis teks berubah menjadi berbasis grafis dua dimensi yang saat ini menjadi standar di hampir semua komputer. Akan tetapi bentuk interaksi manusia dengan komputer terus dikembangkan untuk mencapai interaksi yang lebih alami layaknya interaksi antara manusia dengan manusia. Salah satu interaksi yang sedang berkembang adalah interaksi berbasis visual. Interaksi berbasis visual banyak dikembangkan untuk mengidentifikasi pengguna dan melakukan kontrol terhadap komputer. Interaksi visual ini banyak dikembangkan pada perangkat desktop, akan tetapi pengembangan pada perangkat bergerak masih sangat terbatas. Keterbatasan kapasitas hardware pada perangkat bergerak, serta sifatnya yang mobile menjadi tantangan tersendiri dalam mengembangkan interaksi visual pada perangkat tersebut Dalam penelitian ini dikembangkan sebuah antarmuka berbasis visual pada perangkat bergerak. Dengan menggunakan segmentasi warna kulit dan deteksi posisi ujung jari, sistem yang dikembangkan dapat mendeteksi isyarat tangan yang diberikan pengguna dengan baik dalam kondisi yang ideal. Selain itu, sistem dapat berjalan pada kecepatan 8 sampai 10 frame per detik dengan menggunakan resolusi 160x120 piksel.

Human-computer interaction always evolves over time. It was began from interaction using command line interface, now has transformed into two-dimensional graphical interface which become standard interface in general computers. Despite of that, human-computer interaction is still evolving into a more natural interaction, as natural as possible like interaction between human. One of the developed interactions was visual-based interaction. Visual-based interaction mainly used as user recognition or computer control. While visual-based interaction is well developed in desktop computer, in mobile devices the development is still very limited. It is mainly caused by hardware limitation and the \\"mobile\\" attribute of mobile devices. In this study, a visual-based interface for mobile device has been developed. Using skin color segmentation and curvature-based finger tip detection, the developed system was able to recognize the given hand gesture fairly well in ideal situation. The system was able to reach the speed of 8 to 10 frame per seconds in resolution of 160x120 pixels.

Kata Kunci : Interaksi visual, segmentasi warna kulit, deteksi ujung jari, isyarat tangan