Mahasiswa Radhitya Wawan Yunarko Dosen Pembimbing Imam Kuswardayan, S.Kom., M.T. Dwi Sunaryono, S.Kom., M.Kom.

Transkripsi

1 Mahasiswa Radhitya Wawan Yunarko Dosen Pembimbing Imam Kuswardayan, S.Kom., M.T. Dwi Sunaryono, S.Kom., M.Kom.

2 Berkembangnya Teknologi Augmented Reality Kurangnya Interaksi Antara Pengguna Dengan Objek 3D Pada Aplikasi Augmented Reality Eksplorasi Teknologi Augmented Reality Eksplorasi Teknologi Motion Tracker

3 Perancangan dan Pembuatan Aplikasi Kontrol 3D Interaktif Melalui Sentuhan Tangan. Pengembangan yang Dilakukan: Objek AR 3D Dapat Ditampilkan Pengguna Dapat Memberikan Input Pada Objek AR Objek AR Dapat Merespon Input Pengguna Input Pengguna Berupa Sentuhan Tangan

4 Bagaimana mendeteksi pola penanda (marker)? Bagaimana memunculkan objek 3D pada penanda yang terdeteksi? Bagaimana mendeteksi jari tangan yang digerakkan? Bagaimana mendeteksi sentuhan/tumbukan (collision) pengguna pada objek 3D?

5 Penanganan objek 3D dengan Papervision3D. Lokasi objek 3D bergantung pada posisi penanda (marker). Masukan pada objek dengan metode pelacakan gerakan (motion tracking). Objek 3D memiliki satu jenis gerakan respons.

6 Marker Terdeteksi Objek 3D Tampil Pengguna Memberikan Sentuhan Objek Merespons Sentuhan

7

8 LIBRARY FLARToolkit dan FLARManager Melakukan Deteksi Pola Penanda (marker) Papervision3D Menangani Pemunculan Objek AR 3D MotionTracker.as Melakukan Deteksi Gerakan Tangan & Sentuhan ALAT Kamera (webcam) PC, Notebook, dsb. Penanda (marker)

9 Subsistem Pelacakan Penanda (Marker Tracking Subsystem) FLARManager & FLARToolkit POLA PENANDA Subsistem Penanganan Grafis (Graphics Handling Subsystem) POLA PENANDA Papervision 3D Subsistem Pelacakan Gerakan (Motion Tracking Subsystem) MotionTracker.as Lokasi (Koordinat) Tangan

10 Contoh Koleksi Objek Penanganan Library: Library FLARManager & FLARToolkit Library Papervision 3D Library MotionTracker.as

11 Pembantu Menu Tweening Penampil Pencahayaan Tampilan Objek Pelacak Penanda Pengenalan Pola Penentuan Koordinat Objek 3D Objek 3D Animasi Scene Pelacak Gerakan Pelacakan Gerakan Area Gerakan Pustaka Papervision3d FLAR MotionTracker

12

13 Penampilan Objek 3D Ubah Posisi Objek 3D Masukan Dengan Gerakan Tangan Pengaturan Pencahayaan Berinteraksi Dengan Objek 3D

14 Marker Tertangkap Kamera Objek I Tampil Objek II Tampil

15 Posisi Awal Perubahan Posisi Perubahan Orientasi

16 Pengaturan Awal Pengaturan Blur Pengaturan Brightness Pengaturan Contrast

17 Keadaan Awal Tangan Menyentuh Objek Respons Objek

18 Memungkinkan Interaksi Kontrol Pengguna Terhadap Objek AR Objek AR Mampu Merespons Input Pengguna Input Pengguna Berupa Sentuhan Tangan Tidak Diperlukan Marker Tambahan Dalam Mendeteksi Sentuhan Tangan

19 Aplikasi mampu menghasilkan objek yang tidak hanya dapat dilihat, tetapi juga mampu merespons aksi yang diberikan pengguna. Objek pada aplikasi ini dapat difungsikan sebagai teman virtual.

20 Aplikasi berhasil melakukan pelacakan penanda AR. Objek 3D berhasil ditampilkan pada aplikasi yang dibangun (Posisi dan Orientasi Arah Objek). Pelacakan gerakan dapat berjalan. Gerakan pengguna dapat terlacak dengan baik oleh aplikasi. Interaksi antara pengguna dengan objek dapat terjadi dengan baik. Terjadi collision detection Pengguna dapat melakukan pengaturan pencahayaan.

21 Resolusi pola perlu diperhatikan karena semakin rendah resolusinya, semakin tidak akurat perangkat kamera dalam mendeteksi pola tertentu, tetapi resolusi terlalu tinggi juga akan membuat kamera kesulitan mendeteksi pola. Pendeteksian sentuhan dapat ditingkatkan dengan mendeteksi bentuk jari sehingga sentuhan dapat dispesifikasikan hanya terjadi ketika jari tangan yang bergerak. Pengembangan lebih lanjut: permainan, navigasi, desain langsung dengan gerakan tangan, dll.

22 Perancangan dan Pembuatan Aplikasi Kontrol Objek 3D Interaktif Melalui Sentuhan Tangan Berbasis Augmented Reality Dengan Library FLAR dan MotionTracker Radhitya Wawan Yunarko