PERANCANGAN SISTEM PENERJEMAH BAHASA ISYARAT MENGGUNAKAN KLASIFIKASI ACTION RECOGNITION DENGAN METODE LONG SHORT TERM MEMORY (LSTM)

Ardianto, Nur (2024) PERANCANGAN SISTEM PENERJEMAH BAHASA ISYARAT MENGGUNAKAN KLASIFIKASI ACTION RECOGNITION DENGAN METODE LONG SHORT TERM MEMORY (LSTM). Bachelor thesis, Institut Teknologi Kalimantan.

	Text 04181065_cover.pdf Download (386kB)
	Text 04181065_statement_of_authenticity.pdf Download (185kB)
	Text 04181065_publishing_agreemen.pdf Download (424kB)
	Text 04181065_approval_sheet.pdf Download (211kB)
	Text 04181065_preface.pdf Download (127kB)
	Text 04181065_abstract_id.pdf Download (177kB)
	Text 04181065_abstract_en.pdf Restricted to Repository staff only until 4 January 2026. Download (113kB) | Request a copy
	Text 04181065_table_of_conten.pdf Restricted to Repository staff only until 4 January 2026. Download (194kB) | Request a copy
	Text 04181065_illustrations.pdf Restricted to Repository staff only until 4 January 2026. Download (179kB) | Request a copy
	Text 04181065_tables.pdf Restricted to Repository staff only until 4 January 2026. Download (160kB) | Request a copy
	Text 04181065_chapter_1.pdf Restricted to Repository staff only until 4 January 2026. Download (338kB) | Request a copy
	Text 04181065_chapter_2.pdf Restricted to Repository staff only until 4 January 2026. Download (1MB) | Request a copy
	Text 04181065_chapter_3.pdf Restricted to Repository staff only until 4 January 2026. Download (646kB) | Request a copy
	Text 04181065_chapter_4.pdf Restricted to Repository staff only until 4 January 2026. Download (1MB) | Request a copy
	Text 04181065_conclusions.pdf Restricted to Repository staff only until 4 January 2026. Download (240kB) | Request a copy
	Text 04181065_bibliography.pdf Download (118kB)
	Text 04181065_enclosure.pdf Restricted to Repository staff only until 4 January 2026. Download (172kB) | Request a copy
	Text 04181065_presentation.pdf Restricted to Repository staff only until 4 January 2026. Download (1MB) | Request a copy
	Text 04181065_Form. TA 020.pdf Download (410kB)

Abstract

Pada penelitian ini bertujuan untuk merancang sebuah sistem penerjemah bahasa isyarat yang efektif dengan menggunakan teknik klasifikasi Action Recognition dengan metode Long Short Term Memory. Komunikasi pada umumnya melibatkan penggunaan berbagai macam media untuk menyampaikan ide yang kita punya melalui lisan, tulisan, gambar dan lain sebagainya. Sedangkan untuk para penyandang tunarungu berkomunikasi menggunakan bahasa isyarat yang akan melambangkan setiap kata dengan menggunakan bantuan gerakan tangan, ekspresi wajah dan gerak bibir. Pada penelitian ini yang menjadi perhatian penting adalah bagaimana cara nya untuk melacak perubahan-perubahan dari koordinat tangan saat mengucapkan bahasa isyarat. Sehingga diperlukan sebuah metode dimana algoritma untuk mengolah gerakan tangan dengan memanfaatkan dari keypoints dari setiap ruas tulang dari manusia dan dipadukan dengan algoritma yang dapat menyimpan data squational untuk mengakomodasi dari setiap pergerakan yang dilakukan oleh tangan, karena gerakan dari bahasa isyarat lebih didominasi pada gerakan yang lebih dinamis. Penelitian ini akan memanfaatkan video yang memperagakan bahasa isyarat yang nantinya dengan bantuan dari library Mediapipe akan memberikan tanda pada tangan untuk menyimpan setiap nilai-nilai dari perubahan yang dilakukan oleh tangan dalam bentuk array sehingga kita dapat melakukan proses pelatih menggunakan metode LSTM yang telah kita persiapkan. Hasil yang diperoleh dalam penelitian ini adalah dengan memvariasikan 3 bentuk lapisan pada jaringan saraf tiruan dan banyak nya video yang berada pada 1 kelas sehingga didapatkan nilai pada percobaan pertama dengan dataset 20 akurasi nya berada pada nilai 87,5%, pada dataset 30 mendapatkan nilai 79,167% dan pada dataset 40 mendapatkan nilai 73.438%. Untuk percobaan ke-2 didapatkan hasil sebagaimana berikut pada dataset 20 mendapatkan hasil 71.875%, pada dataset 30 mendapatkan hasil 70.833% dan pada dataset 40 mendapatkan nilai sebesar 79.688%, dan pada percobaan ke-3 didapatkan hasil untuk percobaan pada dataset 20 sebesar 93.750% dan untuk dataset 30 mendapatkan nilai 77.083% dan untuk dataset 40 mendapatkan nilai sebesar 87.500%. dari hasil yang didapatkan nilai tertinggi diperoleh pada percobaan ke-3 pada dataset 20 dengan nilai 93.750%.

Item Type:	Thesis (Bachelor)
Subjects:	T Technology > TK Electrical engineering. Electronics Nuclear engineering T Technology > TR Photography
Divisions:	Jurusan Teknologi Industri dan Proses > Teknik Elektro
Depositing User:	Nur Ardianto
Date Deposited:	28 Dec 2023 02:03
Last Modified:	28 Dec 2023 02:03
URI:	http://repository.itk.ac.id/id/eprint/20800

Actions (login required)

View Item