PENERAPAN HAND GESTURE RECOGNITION UNTUK PENGENALAN BAHASA ISYARAT MENGGUNAKAN ALGORITMA CONVOLUTIONAL NEURAL NETWORK

Yuandra, Muhammad Khalif Farrel (2025) PENERAPAN HAND GESTURE RECOGNITION UNTUK PENGENALAN BAHASA ISYARAT MENGGUNAKAN ALGORITMA CONVOLUTIONAL NEURAL NETWORK. S1 - Sarjana thesis, Universitas AMIKOM Yogyakarta.

	Text (COVER - ABSTRAK) COVER.pdf - Published Version Download (791kB)
	Text (BAB I) BAB I.pdf - Published Version Download (635kB)
	Text (BAB II) BAB II.pdf - Published Version Restricted to Registered users only Download (945kB)
	Text (BAB III) BAB III.pdf - Published Version Restricted to Registered users only Download (1MB)
	Text (BAB IV) BAB IV.pdf - Published Version Restricted to Registered users only Download (160kB)
	Text (BAB V) BAB V.pdf - Published Version Download (100kB)
	Text (DAFTAR PUSTAKA) Daftar Pustaka.pdf - Published Version Restricted to Registered users only Download (105kB)
	Archive (SOURCE CODE) Sourcecode - 19.11.3256.zip Restricted to Repository staff only Download (55MB)
	Text (PUBLIKASI) Publikasi.pdf - Published Version Restricted to Repository staff only Download (452kB)

Abstract

Teknologi menjadi salah satu alat bantu yang berguna oleh manusia dalam kehidupan dan aktivitas keseharian mereka karena dapat memudahkan proses tersebut sehingga tidak membuang banyak energi dan waktu. Salah satu tipe orang yang dapat memanfaatkan teknologi tersebut adalah orang-orang yang memiliki disabilitas terutama yang memiliki kesusahan dalam berkomunikasi verbal. Maka dari itu, penelitian ini bertujuan untuk menerapkan hand gesture recognition (HGR) berbasis algoritma convolutional neural network (CNN) untuk mengenali bahasa isyarat. Dari 1139 total dataset yang digunakan, model CNN yang terlatih selama 88 epoch dapat mencapai tingkat akurasi training paling tinggi 0.76 dan 0.78 untuk validation. Saat model tersebut digunakan secara langsung, model berhasil menangkap dan mengenali pergerakan tangan bahasa isyarat berbasis SIBI dengan nilai akurasi diatas 50%. Salah satu alasan mengapa model ini tidak dapat meraih angka yang lebih tinggi secara konsisten dikarenakan bahan data yang kurang bervariasi dan metode pelatihan yang tidak menggunakan transfer learning sehingga perlu menggunakan banyak data.

Actions (login required)

View Item