BAB 4 IMPLEMENTASI DAN EVALUASI

Transkripsi

1 BAB 4 IMPLEMENTASI DAN EVALUASI Dalam bab ini dilakukan penelitian yang sebenarnya dengan membuat account baru dan melakukan pelatihan data data dengan menggunakan jaringan syaraf tiruan pada program Microsoft Visual Basic. Penelitian dilakukan dengan mencatat perubahan dan hasil yang dicapai oleh pelatihan tersebut. Setelah proses pelatihan selesai maka akan dilakukan proses pengujian pengenalan suara. 4. Implementasi Pelatihan Jaringan Syaraf Tiruan Hal yang pertama kali dilakukan dalam pengujian program sistem pengenalan suara adalah membuat data sampel suara yang akan dibandingkan. Program sistem pengenalan suara ini memiliki tombol untuk menjalankan simulator login maupun control panel, seperti yang terlihat pada gambar 4.. Gambar 4. Tampilan Program Awal 52

2 53 Data sampel dibuat dengan melakukan pendaftaran suara. Proses pendaftaran suara dilakukan untuk memberikan informasi pengguna maupun template suara yang akan dijadikan acuan pada proses login. Untuk melakukan proses tersebut, pengguna dapat memasuki control panel dan menkan tombol add pada Account Management untuk memunculkan form add user. Gambar 4.2 Admin control panel Gambar 4.3 Tampilan pendaftaran suara Dengan menekan tombol record maka sistem akan memeriksa validitas ID yang dimasukkan. Pemeriksaan keberadaan ID dalam basis data berkaitan dengan

3 54 batasan program untuk menerima maksimum lima pengguna dengan maksimum lima data suara. Penolakan diberikan oleh sistem jika pengguna memasukkan ID baru yang dimana sudah terdapat lima ID yang berbeda dalam basis data atau telah terdapat lima template untuk ID yang dimasukkan. Jika ID yang dinyatakan valid maka sistem akan memberikan konfirmasi berupa kotak dialog untuk mempersiapkan proses perekaman suara. Gambar 4.4 Kotak Dialog Konfirmasi Persiapan Perekaman Konfirmasi persiapan proses perekaman ditujukan untuk memberikan kesempatan kepada pengguna agar mempersiapkan proses perekaman dengan baik, sehingga hasil yang diperoleh dapat sesuai dengan harapan. Dengan menekan tombol OK, maka proses perekaman akan dilakukan. Setelah perekaman suara selesai dilakukan, sistem akan memberikan kotak konfirmasi untuk mendegarkan suara yang telah direkam. Gambar 4.5 Kotak Konfirmasi Proses Pemutara Perekaman Suara

4 55 Pemutaran perekaman suara dilakukan untuk memberi kesempatan kepada pengguna dalam mengevaluasi rekaman suaranya untuk mengetahui apakah perlu dilakukan perekaman ulang atau tidak. Hasil perekaman yang dinilai kurang baik dapat diabaikan dengan melakukan proses perekaman ulang untuk mendapatkan rekaman yang lebih baik. Pengguna dapat memilih tombol YES untuk perekaman ulang pada kotak konfirmasi pengulangan proses perekaman. Gambar 4.6 Kotak Konfirmasi Pengulangan Proses Perekaman Jika pengguna menekan tombol NO pada kotak konfirmasi pengulangan proses perekaman, sistem akan melakukan proses ekstraksi fitur dan menyimpannya dalam basis data. Setelah proses transformasi selesai dilakukan, sistem secara otomatis akan menutup form add user dan kembali ke control panel. Proses perekaman suara untuk pelatihan jaringan backpropagation dilakukan dengan membuat dua ID dengan masing masing lima data sampel suara. Jumlah epoh dalam pelatihan jaringan syaraf tiruan ini akan dipengaruhi oleh MSE, dimana jumlah epoh akan didapat setelah MSE memenuhi target. Untuk pembuatan account baru, operation mode yang digunakan adalah learning dan bobot yang digunakan adalah bobot yang baru, sedangkan akurasi yang digunakan pada pelatihan dapat diatur dari 7% sampai dengan 99%.

5 56 Gambar 4.7 Hasil proses pelatihan 4.2 Implementasi Pengujian Jaringan Syaraf Tiruan Pengujian akan dilakukan dalam proses login. Proses login digunakan pada saat pengguna hendak memasuki sistem. Dalam proses tersebut, sistem memeriksa keabsahan informasi yang diberikan pengguna. Sebuah ID dan suara pengguna diperlukan dalam pengujian ini. Jika ID dinyatakan valid, maka sistem meminta pengguna untuk memberikan suaranya dalam proses perekaman. Hasil yang didapat dari perekaman suara pengguna akan digunakan sebagai input jaringan syaraf tiruan untuk pengenalan pola. Hasil output JST akan dibandingkan dengan target basis data sesuai dengan ID yang dimasukkan. Pola dianggap sesuai jika seluruh hasil output memiliki perbedaan lebih kecil dari ( tingkat akurasi )% terhadap target, sedangkan jika perbedaan output terhadap target lebih besar dari ( tingkat akurasi )%, maka sistem akan menyimpulkan bahwa

6 57 suara yang diberikan pada proses login bukan merupakan suara pengguna sebenarnya dari pemilik ID. Secara umum, hasil yang dicapai dari proses login adalah penerimaan atau penolakan terhadap pengguna yang melakukan vrifikasi. Pengujian terhadap sistem pengenalan suara ini akan dilakukan dengan dua akurasi yang berbeda, yaitu 8% dan 9%. Penggunaan akurasi yang berbeda ditujukan untuk mencari hasil pengenalan suara mana yang akan lebih akurat dan untuk mencari akurasi mana yang lebih baik untuk menghindari pengenalan suara yang tidak sesuai dengan data account. Gambar 4.8 Sampel Suara pada data account Gambar 4.9 Entropi Sampel Suara Hasil pengujian dari kali masukan suara dengan menggunakan akurasi 8% adalah sebagai berikut :

7 58 Tabel 4. Perbandingan antara input suara yang sesuai dengan data account No. Tes Desired Level Hasil Neural Network Difference Hasil Gambar 4. Contoh Pengenalan Suara

8 59 Tabel 4.2 Perbandingan antara input suara yang tidak sesuai dengan data account No. Tes Desired Level Hasil Neural Network Difference Hasil Gambar 4. Contoh pengenalan suara

9 6 Gambar 4. dan gambar 4. adalah contoh hasil dari pengujian yang dilakukan pada menu Login, gambar 4. adalah hasil pengenalan suara yang sesuai dengan data suara pada account, sedangkan gambar 4. adalah hasil pengenalan suara yang tidak dapat dikenali ( unidentified ). Hasil pengenalan suara yang identified dan unidentified dapat disebabkan oleh dua hal,yaitu akurasi yang digunakan pada pelatihan dan input suara yang tidak sesuai atau tidak sesuai dengan data account. Hasil pengujian dari 5 kali percobaan dengan menggunakan akurasi 8% untuk masukan suara dengan noise adalah sebagai berikut: Table 4.3 Hasil pengujian input suara dengan noise No. Tes Desired Level Hasil Neural Network Difference Hasil Hasil pengujian dari kali percobaan dengan menggunakan akurasi 9% dapat dilihat pada tabel berikut :

10 6 Tabel 4.4 Perbandingan antara input suara yang sesuai dengan data account No. Tes Desired Level Hasil Neural Network Difference Hasil Tabel 4.5 Perbandingan antara input suara yang tidak sesuai dengan data account No. Tes Desired Level Hasil Neural Network Difference Hasil Hasil pengujian dari 5 kali percobaan dengan menggunakan akurasi 9% untuk masukan suara dengan noise adalah sebagai berikut :

11 62 Tabel 4.6 Hasil pengujian input suara dengan noise No. Tes Desired Level Hasil Neural Network Difference Hasil Evaluasi Sitem Dari hasil pengujian yang dilakukan dengan memasukkan suara pada menu login sebanyak 3 kali, dapat disimpulkan pelatihan jaringan dengan akurasi 9% memberikan hasil yang lebih baik daripada pelatihan dengan akurasi 8%. Hal ini dapat dilihat pada tabel 4.2 percobaan kedua, dimana suara pengguna yang tidak sesuai dengan data ID masih dapat dikenali. Dari hasil pengujian 5 kali masukkan suara dengan noise pada akurasi 8%, disimpulkan bahwa masukkan suara % tidak dapat dikenali, sedangkan pada akurasi 9%, tingkat keberhasilan pengenalan suara dengan noise hanya 2%. Sistem pengenalan suara ini masih memiliki kelemahan. Kelemahan pada sistem ini dipengaruhi oleh kondisi lingkungan, pengaturan audio dan hardware ( sound card dan mikrofon ) pada saat perekaman suara. Kondisi lingkungan yang dimaksud adalah lingkungan yang tenang dan lingkungan yang bising, perbedaan

12 63 kondisi lingkungan pada saat proses pendaftaran suara dan pada saat login akan menghasilkan fitur yang berbeda. Pengaturan audio yang berubah ubah pada saat perekaman akan mengubah pola sinyal suara yang direkam. Produk hardware yang digunakan tersedia dalam berbagai merk dan jenis. Penggantian hardware baru dapat mengakibatkan perbedaan spesifikasi dalam kemampuan perekaman. Secara umum, administrator sistem harus menjaga standarisasi dari ketiga faktor tersebut pada saat pendaftaran suara dan pada saat pengenalan suara. Hal ini diperlukan agar suara yang direkam oleh komputer memiliki pola yang stabil pada setiap perekaman.