RANCANG BANGUN APLIKASI PENGENALAN EMOSI BERDASARKAN HIGH LEVEL STATISTICAL FUNCTION DARI SPECTRAL FEATURES DENGAN MACHINE LEARNING

Priambodo, Arjun (2023) RANCANG BANGUN APLIKASI PENGENALAN EMOSI BERDASARKAN HIGH LEVEL STATISTICAL FUNCTION DARI SPECTRAL FEATURES DENGAN MACHINE LEARNING. Bachelor thesis, Institut Teknologi Kalimantan.

	Text 04181016_cover.pdf Download (123kB)
	Text 04181016_statement_of_authenticity.pdf Download (80kB)
	Text 04181016_publishing_agreement.pdf Download (164kB)
	Text 04181016_approval_sheet.pdf Download (99kB)
	Text 04181016_preface.pdf Download (165kB)
	Text 04181016_abstract_id.pdf Download (70kB)
	Text 04181016_abstract_en.pdf Restricted to Repository staff only until 21 July 2025. Download (69kB) | Request a copy
	Text 04181016_Illustration.pdf Restricted to Repository staff only until 21 July 2025. Download (251kB) | Request a copy
	Text 04181016_table_of_content.pdf Restricted to Repository staff only until 21 July 2025. Download (448kB) | Request a copy
	Text 04181016_tables.pdf Restricted to Repository staff only until 21 July 2025. Download (244kB) | Request a copy
	Text 04181016_notations.pdf Restricted to Repository staff only until 21 July 2025. Download (245kB) | Request a copy
	Text 04181016_chapter_1.pdf Restricted to Repository staff only until 21 July 2025. Download (353kB) | Request a copy
	Text 04181016_chapter_2.pdf Restricted to Repository staff only until 21 July 2025. Download (275kB) | Request a copy
	Text 04181016_chapter_3.pdf Restricted to Repository staff only until 21 July 2025. Download (821kB) | Request a copy
	Text 04181016_chapter_4.pdf Restricted to Repository staff only until 21 July 2025. Download (974kB) | Request a copy
	Text 04181016_conclusion.pdf Restricted to Repository staff only until 21 July 2025. Download (68kB) | Request a copy
	Text 04181016_blibliography.pdf Download (187kB)
	Text 04181016_enclosure.pdf Restricted to Repository staff only until 21 July 2025. Download (145kB) | Request a copy
	Text 04181016_paper.pdf Restricted to Repository staff only until 21 July 2025. Download (957kB) | Request a copy
	Text 04181016_presentation.pdf Restricted to Repository staff only until 21 July 2025. Download (960kB) | Request a copy
	Text 04181016_Form. TA-020.pdf Restricted to Repository staff only until 21 July 2025. Download (37kB) | Request a copy

Abstract

Emosi merupakan bagian dari diri manusia yang dirasakan setiap harinya. Gangguan emosi tentunya membuat seseorang tidak bisa menjalani kesehariannya dengan normal seperti manusia pada umumnya. Pendeteksian emosi butuh dilakukan untuk membantu para pakar psikologi dalam menangani gangguan emosi. Maka dari itu akan dilakukan penelitian Speech Emotion Recognition dengan sistem realtime untuk mempermudah berbagai bidang yang membutuhkan manfaat dari teknologi ini. Aplikasi akan dibuat dengan metode High Level Statistical Function sebagai fitur ekstraksi dan Multi layer perceptron sebagai klasifikator. Langkah awal dilakukan training & testing dataset RAVDESS Speech Audio Emotion Sample agar didapatkan hasil akurasi terbaik. Dataset berisi audio dari pembicara yang berintonasi emosi berupa emosi natural, kalem, senang, sedih, marah, tenang, jijik, dan terkejut. Kombinasi fitur ekstraksi high-statistical function dilakukan dengan variasi pengurangan 1 fitur dari 5 fitur yang digunakan pada dataset. Hasil dari kombinasi fitur yang didapatkan yaitu pada penggunan 1 fitur mendapatkan hasil akurasi 72.2%, 2 fitur mendapatkan hasil 77.0%, 3 fitur mendapatkan hasil 71.5%, 4 fitur mendapatkan hasil 77.7%, dan 5 fitur mendapatkan hasil 77.7%. Karena pada kombinasi pada 5 fitur mendapatkan hasil akurasi tertinggi, maka aplikasi yang dibuat akan menggunakankombinasi 5 fitur ekstraksi yaitu MFCC, Chroma, Mel, Contrast, dan Tonnetz. Model klasifikasi yang digunakan yaitu Machine Learning Artificial Neural Network Multi-Layer Perceptron. Model ini menggunakan Hidden Layer sebanyak 3 lapis dan 256 pada setiap titiknya. Perekaman audio secara langsung juga dibuat pada aplikasi dengan menggunakan pyaudio. Setelah program perekaman dibuat, maka dilanjutkan dengan pembuatan GUI menggunakan framework Kivy. Aplikasi telah dibuat dan dapat berjalan sesuai dengan penggunaan fitur ekstraksi seta model klasifikasi. Pengujian aplikasi dilakukan pada 20 responden yaitu 10 orang pria dan 10 orang wanita. Nilai hasil rata-rata akurasi tiap emosi pada pria yaitu natural 27.74%, kalem 18.77%, senang 21.42%, sedih 18.02%, marah 21.83%, tenang 18.12%, jijik 20.53%, dan terkejut 23.84%. Sedangkan nilai hasil rata-rata pada wanita tiap emosinya yaitu natural 19.67%, kalem 16.63%, senang 21.66%, sedih 19.32%, marah 16.19%, tenang 19.28%, jijik 18.91%, dan terkejut 15.29%.

Item Type:	Thesis (Bachelor)
Subjects:	T Technology > TK Electrical engineering. Electronics Nuclear engineering
Divisions:	Jurusan Teknologi Industri dan Proses > Teknik Elektro
Depositing User:	Arjun Priambodo
Date Deposited:	21 Jul 2023 05:51
Last Modified:	21 Jul 2023 05:51
URI:	http://repository.itk.ac.id/id/eprint/20333

Actions (login required)

View Item