Pembimbing: Ahmad Zaini, ST., MT Oleh: Saiful Yahya

Transkripsi

1 Video compositing menggunakan poisson blending Pembimbing: Mochammad Hariadi, ST., M.Sc., Ph.D. Ahmad Zaini, ST., MT Oleh: Saiful Yahya ITS

2 Riset yang telah ada P. P erez, M. Gangnet, and A. Blake. Poisson image editing. ACM Transactions on Graphics (Proc. SIGGRAPH 2003), 22(3): , July 2003 Fast Poisson Blending using Multi- Splines, Richard Szeliski, Matthew Uyttendaele, and Drew Steedly, Microsoft Research and Microsoft Motion-Aware Gradient Domain Video Composition; Tao Chen, Jun-Yan Zhu, Ariel Shamir, and Shi-Min Hu. 2013

3 P. P erez, M. Gangnet, and A. Blake. Poisson image editing. ACM Transactions on Graphics (Proc. SIGGRAPH 2003), 22(3): , 318, July 2003 Menggunakan persamaan poisson untuk menggabungkan dua image. Menggabungkan pixel yang ditandai dengan pixel yang berhimpitan yang mempengaruhi pixel sebelahnya.

4 Fast Poisson Blending using Multi-Splines, Richard Szeliski, Matthew Uyttendaele, and Drew Steedly, Microsoft Research and Microsoft Teknik untuk Poisson cepat blending dan gradien domain compositing. Dengan menggunakan peta tunggal piecewise-halus offset untuk melakukan blending, mengaitkan peta yang terpisah dengan masing-masing g sumber gambar input

5 Motion-Aware Gradient Domain Video Composition; Tao Chen, Jun-Yan Zhu, Ariel Shamir, and Shi-Min Hu For images, gradient domain composition methods like Poisson blending offer practical solutions for uncertain object boundaries and differences in illumination conditions. However, adapting Poisson image blending to video faces new challenges due to the added temporal dimension. In video, the human eye is sensitive to small changes in blending boundaries across frames, and slight differences in motions of the source patch and target video. We present a novel video blending approach that tackles these problems by merging g the gradient of source and target videos and optimizing a consistent blending boundary based on a user provided blending trimap for the source video. Our approach extends mean-value coordinates interpolation to support hybrid blending with a dynamic boundary while maintaining interactive performance. We also provide a user interface and source object positioning method that can efficiently deal with complex video sequences beyond the capabilities of alpha blending.

6 Video compositing Fokus utama dari teknik komposisi video yaitu untuk menurunkan jumlah usaha manual yang diperlukan dalam prosesnya.

7 Tantangan utama dalam gradien domain video yang blending, sebagai lawan image blending, berasal dari gerak. Pertama, bahkan jika pencampuran hasil untuk setiap frame individu terlihat memuaskan, batasbatas pencampuran dalam bingkai yang berdekatan mungkin tidak konsisten, dan 'popping' artefak mungkin muncul.

8 Gerakan sumber dan target gradien bidang biasanya berbeda dan dapat menyebabkan artefak gerak bahkan jika batas-batas b t pencampuran konsisten dari waktu ke waktu. Perbedaan gerak kamera sering ada antara sumber dan video sasaran, dan ada kebutuhan untuk menyelaraskan mereka.

9 Tantangan riset Poisson blending selama ini masih menggunakan 2D, pada video compositing dimungkinkan untuk mengembangkan dari poisson blending 2D menjadi poisson blending 3D.

10 Rumusan masalah Poisson blending gyang digunakan selama ini pada image dan video commpositing menggunakan matriks 2D, peneliti ingin mengembangkan matriks 3D poisson blending pada video compositing.

11 Tujuan Menggunakan poisson blending 3D pada video compositing sebagai salah satu wacana kedepan.

12 Batasan Video sumber menggunakan video yang memiliki background hijau Video berdurasi 5-10 frame

13 Manfaat Mengetahui penggunaan metode poisson blending untuk penerapan video compositing yang menghaluskan gradasi pada penggabungan g video. Menganalisa filter 3D dari persamaan poisson pada penggabungan ga video

14 BAB 2 Video compositing RGB to Grayscale Persamaan Poisson Konvolusi

15 Poisson equation Persamaan differensial parsial Berasal dari turunan kedua persamaan laplacian

16 Persamaan differensial parsial Persamaan diferensial parsial adalah persamaan yang memuat satu atau lebih turunan parsial dengan dua atau lebih variabel bebas. Orde dari persamaan diferensial parsial merupakan tingkat tertinggi dari derivatif yang ada dalam persamaan diferensial. Derajat dari persamaan diferensial parsial merupakan pangkat tertinggiti i dari turunan tingkat tertinggi yang ada dalam persamaan diferensial.

17 persamaan one-dimensional wave equation: 2 / 2 = 2 ( 2 / 2 ) persamaan aa one-dimensional e o heat equation / = 2 ( 2 / 2 ) persamaan two-dimensional Laplace equation ( 2 / 2 )+( 2 / 2 )=0 persamaan two-dimensional Poisson equation ( 2 / 2 )+( 2 / 2 ) = (, )

18 persamaan two-dimensional wave equation persamaan two dimensional wave equation ( 2 / t 2 ) = 2 (( 2 / 2 )+( 2 / 2 ) ( 2 / 2 )+( 2 / 2 ) ) persamaan three-dimensional Laplace equation ( 2 / 2 )+( 2 / 2 ) + ( 2 / z 2 ) = 0 Dari persamaan diatas didapatkan persamaan three dimensional Poisson: ( 2 / 2 )+( 2 / 2 ) + ( 2 / z 2 ) = f(x,y,z)

19 Poisson blending Poisson blending merupakan teknik blending yang menggunakan persamaan Poisson yang merupakan diferensial parsial orde dua

20 Metode Penelitian

21 Ekstraksi video Proses ekstraksi menggunakan software video editing. Ekstraksi dilakukan untuk mengubah video menjadi citra tunggal yang jamak. a

22 Konversi warna Konversi warna RGB ke grayscale menggunakan persamaan

23 Hasil konversi warna

24 Persamaan poisson ( 2 / 2 )+( 2 / 2 ) = (, ) Poisson blending 2 = Discrete Poisson Equation 2 = aplacian equation (, ) = Persamaan linier i

25 Matriks Poisson

26 Berdasarkan matriks poisson 2D tersebut didapatkan matriks 3D poisson sebagai berikut:

27 Illustrasi 3D poisson

28 konvolusi Persamaan konvolusi g( ) = kernel, dalam penelitian ini menggunakan kernel poisson α = variabel integrasi Konvolusi dilakukan pada masingmasing citra sumber dan citra target terhadap matriks poisson.

29 Illustrasi konvolusi

30 Analisa Dan Pembahasan Percobaan 1 Citra sumber Citra target

31 Citra hasil Analisa Terjadi perbedaan antara frame 1, frame 2 dan frame 3. Frame 2 lebih gelap dikarenakank perbedaan matriks yang mengkonvolusi antara frame 1, frame 2 dan frame 3.

32 Percobaan 2 Citra sumber Citra targett

33 Citra hasil Analisa Perbedaan kontras antara citra sumber dengan citra target mengakibatkan pencampuran video menjadi menyatu.

34 Percobaan 5 Citra sumber Citra target

35 Citra hasil Analisa Penyatuan citra sumber dan citra target terlihat halus, dikarenakan posisi objek dan intensitas it warna

36 Hasil dalam Video

37

38 Kesimpulan dan saran Kesimpulan Dalam menggabungkan video diperlukan pengetahuan komposisi untuk mendapatkan kesan menyatu. Perbedaan yang kontras antara objek dengan latar mempengaruhi hasil pencampuran video. Poisson blending pada latar video yang memiliki kontras menghasilkan penggabungan yang halus. Saran Penggunaan poisson blending dapat ditambahkan fitur yang lain untuk mendapatkan hasil gradasi yang halus

39 Terima Kasih kii il