Manipulasi suara ucapan (speech morphing)

Transkripsi

1

2 pernah tahu? Play

3 Play

4 Manipulasi suara ucapan (speech morphing) Proses manipulasi Sintesis parameter-parameter Suatu proses pembangkitan suara ucapan fisik suara ucapan yang terdapat pada sinyal suara, sehingga melalui suatu (speech program synthesis) dalam komputer menghasilkan suara yang lain frekuensi amplitudo periode

5 perubahan tinggi rendahnya frekuensi dan tekanan (intonasi), perubahan durasi atau lamanya waktu pengucapan suatu suara, serta komponen aperiodik suara yang lain?

6 Speech Transformation and Representation using Adaptive Interpolation of weighted Spectogram (STRAIGHT) dikembangkan sejak tahun 1997 hingga saat ini oleh Hideki Kawahara et al. di Jepang. Mengenal metode 2003, speech morphing dalam bahasa Inggris dan bahasa Jepang. analisis, manipulasi, sintesis suara ucapan...

7 STRAIGHT Digunakan dalam proses manipulasi sinyal suara ucapan, Speech morphing, memerlukan parameter-parameter fisik sinyal Tetap Bagaimana fokus, dan hal terus ini bisa perhatikan terjadi?... suara : F 0 atau frekuensi dasar Power Komponan aperiodik

8 Speech morphing Bahasa Inggris Bahasa Jepang 2013 dan Tim

9 Penerapan Metode STRAIGHT (Speech Transformation and Representation Dosen using Pembimbing Adaptive : Interpolation of weighted Spectogram) pada Manipulasi Sinyal Suara Prof. Dr. Ir. Sekartedjo, M.Sc. NIP dalam Pengucapan Berbahasa Indonesia Dr. Dhany Arifianto, S.T., M.Eng. NIP Rizki Amalia Febriyanti Kartikasari NRP

10 Tujuan 1. Didapatkannya teknik penerapan metode STRAIGHT untuk memanipulasi sinyal suara dengan pengucapan berbahasa Indonesia. 2. Didapatkannya kualitas hasil manipulasi sinyal suara berdasarkan uji subjektifitas yang akan didapatkan dengan Mean Opinion Score (MOS).

11 Batasan masalah 1. Kalimat bahasa Indonesia yang digunakan adalah 15 kalimat yang diucapkan oleh wanita, diambil dari 1529 database kalimat bahasa Indonesia yang telah dibuat. 2. Manipulasi dilakukan pada frekuensi dasar (fundamental frequency) sinyal suara secara manual menggunakan program STRAIGHT pada program Matlab, sedangkan parameter sinyal suara ucapan yang lain dianggap tetap. 3. Uji subjektifitas dilakukan untuk mengetahui kualitas hasil manipulasi sinyal suara ucapan.

12 Metodologi penelitian Tidak atau

13 Metodologi penelitian Parameter Kualitas Score Sangat baik 5 Baik 4 Cukup baik atau 3 Buruk 2 Sangat buruk 1

14 Vokal Tunggal Hasil penelitian 1111 a i u e ǝ o Konsonan b c d f g h j k l m n p ng r s t ny w z y kh sy Database suara ucapan berbahasa Indonesia 1529 kalimat bahasa Indonesia memenuhi kesetimbangan fonetik (phoneticaly balanced) Vokal Rangkap aw = [au] ay = [ai] ey = [ei] oy = [oi]

15 Data awal suara ucapan intonasi normal suara ucapan dengan kategori kalimat tanya Siapa bilang bahwa hidup ini penuh permasalahan rumit? suara ucapan dengan kategori kalimat pendek Sudah bukan waktunya lagi kita berada pada zona aman suara ucapan dengan kategori kalimat panjang Degradasi moral berpengaruh terhadap jatuhnya wibawa sebagai bangsa di mata bangsa lain

16 Data hasil manipulasi sinyal suara ucapan Suara ucapan berbahasa Indonesia dengan 3 intonasi : Marah Sedih Senang Suara ucapan berintonasi marah suara ucapan dengan kategori kalimat tanya Siapa bilang bahwa hidup ini penuh permasalahan rumit? suara ucapan dengan kategori kalimat pendek Sudah bukan waktunya lagi kita berada pada zona aman suara ucapan dengan kategori kalimat panjang Degradasi moral berpengaruh terhadap jatuhnya wibawa sebagai bangsa di mata bangsa lain

17 Data hasil manipulasi sinyal suara ucapan Suara ucapan berintonasi sedih suara ucapan dengan kategori kalimat tanya Siapa bilang bahwa hidup ini penuh permasalahan rumit? suara ucapan dengan kategori kalimat pendek Sudah bukan waktunya lagi kita berada pada zona aman suara ucapan dengan kategori kalimat panjang Degradasi moral berpengaruh terhadap jatuhnya wibawa sebagai bangsa di mata bangsa lain

18 Data hasil manipulasi sinyal suara ucapan Suara ucapan berintonasi senang suara ucapan dengan kategori kalimat tanya Siapa bilang bahwa hidup ini penuh permasalahan rumit? suara ucapan dengan kategori kalimat pendek Sudah bukan waktunya lagi kita berada pada zona aman suara ucapan dengan kategori kalimat panjang Degradasi moral berpengaruh terhadap jatuhnya wibawa sebagai bangsa di mata bangsa lain

19 Data hasil uji subjektif Uji subjektif hasil manipulasi suara ucapan Mean Opinion Score Marah Sedih Senang Emosi 3 20 orang naracoba/ responden, Memberikan score untuk suara ucapan hasil manipulasi Total suara Manipulasi ucapan hasil manipulasi ada Asli 45 suara ucapan 15 suara ucapan berintonasi marah 15 suara ucapan berintonasi sedih 15 suara ucapan berintonasi senang Perbandingan hasil uji MOS suara ucapan manipulasi dengan suara ucapan beremosi asli.

20 Pembahasan Normal Vs Marah suara ucapan dengan kategori kalimat tanya Siapa bilang bahwa hidup ini penuh permasalahan rumit? suara ucapan dengan kategori kalimat tanya Siapa bilang bahwa hidup ini penuh permasalahan rumit? Sama?

21 Pembahasan Normal Vs Sedih suara ucapan dengan kategori kalimat pendek Sudah bukan waktunya lagi kita berada pada zona aman suara ucapan dengan kategori kalimat pendek Sudah bukan waktunya lagi kita berada pada zona aman Sama?

22 Pembahasan Normal Vs Senang suara ucapan dengan kategori kalimat panjang Degradasi moral berpengaruh terhadap jatuhnya wibawa sebagai bangsa di mata bangsa lain suara ucapan dengan kategori kalimat panjang Degradasi moral berpengaruh terhadap jatuhnya wibawa sebagai bangsa di mata bangsa lain Sama?

23 Pembahasan Uji subjektif hasil manipulasi suara ucapan Mean Opinion Score Marah Sedih Senang Emosi 3 Parameter Kualitas Score Sangat baik 5 Baik 4 Manipulasi Cukup baik Asli 3 Buruk 2 Sangat buruk 1 Perbandingan hasil uji MOS suara ucapan manipulasi dengan suara ucapan beremosi asli.

24 Kesimpulan 1. Telah didapatkan teknik penerapan metode STRAIGHT untuk memanipulasi sinyal suara ucapan berbahasa Indonesia. Yaitu untuk mengubah intonasi suara normal ke dalam emosi marah, sedih, dan senang dapat dilakukan dengan mengubah parameter F 0 dari suara normal, sedangkan parameter-parameter fisik lainnya tetap. 2. Kualitas hasil manipulasi yang diperoleh dari uji MOS yaitu 3 untuk suara ucapan manipulasi emosi marah; 3 untuk suara ucapan manipulasi emosi sedih dan suara ucapan hasil manipulasi emosi senang mendapatkan score rata-rata 3. Dengan demikian rata-rata kualitas suara ucapan hasil manipulasi adalah cukup baik.

25 semoga bermanfaat...

26 Dan Dia telah memberikan kepadamu (keperluanmu) dan segala apa yang kamu mohonkan kepadanya. Dan jika kamu menghitung nikmat Allah, tidaklah dapat kamu menghinggakannya. Sesungguhnya manusia itu, sangat zalim dan sangat mengingkari (nikmat Allah). [QS. Ibrahim : 34]