PENGENALAN ABJAD SISTEM ISYARAT BAHASA INDONESIA (SIBI) BERBASIS KAMERA DEPTH

Abstrak

Interaksi dalam kehidupan sehari-hari umumnya menggunakan bahasa verbal. Penyandang disabilitas tidak dapat menggunakan bahasa verbal, tetapi mereka menggunakan bahasa isyarat yang sulit untuk dimengerti. Sehingga, mereka membutuhkan seorang translator, namun dilain sisi translator tidak dapat memberi mereka privasi. Pada penelitian ini sistem pengenalan isyarat alfabet SIBI dilakukan dengan memanfaatkan kamera depth dari Microsoft kinect. Kinect merupakan sebuah teknologi baru yang dapat memindai gerakan manusia dan suara. Pemanfaatan kinect bertujuan untuk melakukan pengenalan bahasa isyarat secara real-time. Kamera depth menghasilkan citra 3D yang dapat digunakan dalam ruangan gelap dan memungkinkan proses deteksi lebih akurat. Dalam penelitian ini dilakukan segmentasi citra berdasarkan jarak antara obyek dan latar belakang dan hanya menangkap bagian tangan. Binerisasi adalah proses selanjutnya dengan otsu thresholding. Selanjutnya cropping untuk mengambil obyek diperlukan dan resize agar mempermudah dan mempercepat proses selanjutnya. Terakhir, proses pengenalan menggunakan metode euclidean distance berdasarkan nilai jarak terkecil antara template dan obyek. Pengujian template menghasilkan akurasi sebesar 96.538462%. Pengujian real-time menghasilkan akurasi yang baik jika tangan pengguna ditangkap kamera dengan hasil sama seperti template.