BAB IV PENGUJIAN DAN ANALSIS

Transkripsi

1 BAB IV PENGUJIAN DAN ANALSIS Evaluasi terhadap pengguna merupakan bagian penting dari suatu sistem yang melibatkan interaksi pengguna. Evaluasi ini menurut Mack [] merupakan proses yang bertujuan untuk mengidentifikasi masalah-masalah kegunaan dalam perancangan antarmuka pengguna dan pengoperasiannya. Masalah-masalah yang teridentifikasi dapat digunakan untuk merekomendasikan perbaikan untuk perancangan antarmuka. Gabbard [7] memaparkan bahwa teknik usability merupakan proses dimana usability dimaksudkan hanya untuk jenis aplikasi interaksi pada semua tahap proses pengembangan. Teknik usability ini tidak dibangun melalui eksperimen berbasis uji hipotesis. Masalah-masalah usability umumnya termasuk tidak berfungsinya sistem, lemahnya kinerja pengguna pada tugas umum atau kritis, kesalahan pengguna, kenyamanan pengguna rendah, dan adopsi pengguna rendah terhadap sistem baru. Evaluasi ini digunakan untuk memperoleh reaksi atau tanggapan pengguna terhadap teknik interaksi tangible ketika melakukan seleksi dan manipulasi dalam AR. Beberapa masalah usability dengan prototipe sistem diidentifikasi, lalu didiskusikan dan solusisolusi yang mungkin disarankan.. Pengujian antarmuka AR tangible Pengujian informal merupakan bagian yang tak terpisahkan dari proses pengembangan suatu sistem. Kapan pun fitur baru diimplementasikan, maka secara informal perlu dilakukan pengujian selama tahap pengembangan. Sangat sering orang-orang mendapatkan kesempatan untuk menggunakan antarmukanya secara informal baik di laboratorium maupun selama sesi demonstrasi. Kegiatan ini merupakan sumber untuk mendapatkan umpan balik yang banyak baik melalui komentar pengguna maupun melalui observasi umum pengguna dengan sistem. Namun demikian, evaluasi formal merupakan hal yang krusial manakala

2 mengembangkan metafora antarmuka pengguna, sehingga beberapa ide yang mempengaruhi metafora akan muncul jika digunakan secara luas. Beragam teknik pengujian telah dipertimbangkan. Pengujian heuristik seperti dikemukakan Faulkner [] dijalankan oleh ahli usability yang membandingkan antarmuka pengguna yang ada dengan prinsip-prinsip atau panduan usability. Banyak hal berkaitan dengan acuan-acuan yang ada untuk antarmuka pengguna tradisional. Karena AR ini merupakan bidang yang boleh dikatakan baru, maka sedikit sekali acuan standar pengujian yang telah dibangun mengkhususkan pada aplikasi AR. Tujuan dari pengujian heuristik adalah untuk mengidentifikasi kemungkinan masalah-masalah usability, dengan mempertimbangkan bahwa sistem yang dievaluasi memenuhi atau tidak bertentangan dengan acuan standar. Gabbard dan Hix [] telah melibatkan dalam mengevaluasi beberapa sistem virtual reality, seperti battlefield dan medical visualisation virtual environment. Mereka telah memperluas kerja pengujiannya dari lingkungan virtual ke sistem AR dan telah mengembangkan seperangkat panduan yang secara khusus digunakan untuk sistem AR. Sayangnya terlalu sedikit ahli usability tersedia untuk menjalankan pengujian heuristik formal. Perangkat acuan oleh Gabbard dan Hix terlalu umum dan sukar diaplikasikan terhadap antarmuka yang dirancang. Pengujian dirancang untuk melingkupi semua aspek antarmuka yang dikembangkan, dari melihat obyek sederhana di AR hingga seleksi dan teknik manipulasi obyek di AR. Pengujian ini berhubungan dengan hal-hal yang bersifat umum, sedangkan aspek-aspek khusus tidak diuji secara rinci. Ke depan, memungkinkan pengujian yang memfokuskan pada aspek-aspek khusus dapat dilakukan. Harapannya bahwa hasil pengujian formal yang telah dilakukan akan membimbing masalah usability dengan lebih nyata, yang dapat menghasilkan bentuk pengujian ke depan dalam aspek-aspek yang lebih rinci.

3 Pengujian, observasi, wawancara dan teknik kuesioner telah digunakan. Dengan pendekatan wawancara, pengguna diberikan antarmuka dan beberapa skenario tugas yang harus dilakukan. Pengguna diminta untuk mengekspresikan pendapat dan perasaannya ketika menjalankan tugas-tugas tertentu lalu diobservasi oleh evaluator. Hal demikian dapat digunakan untuk memahami bagaimana pengguna melakukan pendekatan terhadap antarmuka dan pertimbangan apakah yang ada dibenaknya ketika menjalankan sistem. Pengguna dapat juga memberikan terminologi baru untuk mengekspresikan ide atau fungsi yang dapat digabungkan ke dalam perancangan [9].. Rancangan Pengujian Proses pengujian dijalankan mengikuti rencana pengujian yang dipaparkan di sini. Pengujian melibatkan sampel sepuluh orang, lima pria dan lima wanita. Kelompok pengguna ini diambil secara acak tetapi proses pemilihan sampel berusaha menghindari kelompok peneliti dari ilmu komputer. Usia mereka bervariasi dari usia 7 tahun, rata-rata usia 8, tahun. Pengguna kebanyakan berlatar balakang dari bidang teknik dan ilmu pengetahuan alam. Umumnya mereka sedikit sekali bahkan ada yang belum pernah mengoperasikan AR dan VR, meskipun dua subyek tersebut memiliki pengaruh signifikan pada game komputer D. Pertimbangan jumlah sampel di atas sejalan dengan pendekatan penelitian kualitatif. Dalam memilih sampel, penelitian kualitatif menggunakan teknik non-probabilitas, yaitu suatu teknik pengambilan sampel yang tidak didasarkan atas rumusan statistik tetapi lebih pada pertimbangan subyektif peneliti dengan didasarkan pada jangkauan dan kedalaman masalah yang ditelitinya. Lebih lanjut, penelitian kualitatif tidak ditujukan untuk menarik kesimpulan atas suatu populasi melainkan untuk mempelajari karakteristik yang diteliti baik itu orang atau sekelompok orang, sehingga keberlakuan hasil penelitian tersebut hanya untuk orang atau kelompok yang sedang di teliti tersebut. Konsekuensi dari dasar pemikiran tersebut ialah pemilihan sampel tidak tergantung pada kuantitas tetapi pada kualitas orang yang akan diteliti. 7

4 Pengujian terdiri atas analisis beragam aspek dari kinerja pengguna pada tugas-tugas untuk menjalankan antarmuka. Kegiatan dan pendapat responden dicatat ketika melakukan tugas, dan kuesioner digunakan untuk menjaring opininya dengan cara kuantitatif. Pengujian dipisah ke dalam tiga tahap utama, dengan masing-masing tahap menganalisis aspek-aspek yang ada pada sistem. Untuk jelasnya, tahapan ini dituliskan dalam Tabel. dan digambarkan lebih rinci berikut ini. Tabel. Outline pengujian. Item Tahap Pengujian Deskripsi Pengenalan Pengenalan awal Memperkenalkan pengguna agar terbiasa dengan Lingkungan AR sistem AR. Pengguna melakukan tracking, Seleksi Mnipulasi Obyek dan Selection Grabbing Moving Dropping mengamati obyek virtual pada marker. Pengguna mulai melakukan interaksi dengan marker sebagai pointer untuk memilih menu yang disediakan. Untuk berinteraksi dalam skenario game tsunami, pengguna diminta memilih menu game tsunami. Obyek-obyek yang harus di-grab diperlihatkan. Pengguna diminta melakukan grabbing dengan alat interaksi. Obyek yang berhasil di-grab digerak-gerakkan untuk dipindahkan ke lokasi lain dari posisi semula. Pengguna diminta menaruh obyek hasil grabbing dengan cara memiringkan alat interaksi ke arah posisi baru dari marker Pengujian Akhir Kesan Umum Pengguna diminta melakukan tugas berulang-ulang hingga semua obyek berhasil dipindahkan dari posisi awal ke posisi baru. Pengguna diminta menuliskan kesan umum dan memberikan komentar jika menginginkan. Ketika sistem perlu menggunakan kamera dan alat interaksi, maka pengguna diberikan instruksi oleh evaluator melalui pengujian dan dianjurkan berinteraksi dengan sistem. Evaluator memberikan bantuan ketika diperlukan. Semua pengguna mencoba setiap tahap. Ketika pengguna menyelesaikan salah satu tahap ini, kemudian menyimpan alat interaksi lalu mengisi kuesioner yang relevan dengan aspek dengan sistem yang telah dijalankan. Pengujian dilakukan di atas meja, sehingga pengguna nyaman melakukan interaksi dengan marker pada sistem. Webcam, Mega Pixel ditempatkan di atas tampilan 8

5 dan marker area menghadap pengguna. Komputer yang digunakan pada pengujian adalah Notebook. GHz Pentium yang menjalankan aplikasi ARToolKit. Untuk masing-masing bagian antarmuka yang diuji, pengguna ditanya pada kuesioner bagaimana perasaannya terhadap aspek-aspek dari sistem. Dua pertanyaan diulang-ulang untuk untuk tiap tahap evaluasi sehingga perbandingan dapat dijalankan pada perasaan pengguna melalui pengujian. Pertanyaan tersebut adalah sebagai berikut. Bagaimanakah kesan umum dari sistem tersebut? (Membosankan-Mengasyikkan). Bagaimanakah pendapat anda mengenai sistem tersebut? (Sulit dioperasikan-mudah dioperasikan)... Lingkungan AR Tahap ini mengizinkan pengguna untuk menjadi terbiasa dengan sistem AR. Pada mulanya diperlukan waktu yang cukup untuk memahami apa yang terjadi di hadapan pengguna, membiarkannya menjadi nyaman ketika melakukan seleksi dan manipulasi terhadap marker dengan alat interaksi. Penjelasan singkat tentang cara kerja tracking sistem AR diberikan dan pengguna dianjurkan untuk melakukan pengujian, sebagai contoh mengubah-ubah letak marker dan mengatur posisi kamera. Pengguna juga diajarkan agar menepatkan posisi kamera terhadap marker. Mencobacoba efek tampilan AR ketika posisi kamera dihalang-halangi oleh sesuatu. Evaluator melakukan observasi terhadap reaksi umum ketika berinteraksi dengan sistem, dan mencatat keanehan-keanehan ketika pengguna berinteraksi menggunakan marker interaksi. Tahapan awal pengujian digunakan untuk memperoleh umpan balik dari aspek-aspek yang ada pada sistem termasuk kualitas obyek visual, juga merasakan melakukan seleksi dan manipulasi dengan alat interaksi. Disamping dua pertanyaan standar di atas, perasaan pengguna terhadap sistem (membosankan hingga menyenangkan) dan kemudahan dalam kegunaan, pengguna juga ditanya halhal berikut ini. 9

6 Bagaimanakah kesan anda ketika melihat obyek virtual berada di atas dunia nyata (marker)? (Tidak tertarik- Tertarik). Bagaimanakah kesan anda ketika menyentuh obyek virtual dengan tangan anda? (Tidak tertarik- Tertarik). Bagaimanakah tingkat kualitas visual dari model obyek virtual yang ditampilkan? (Rendah-Tinggi)... Seleksi dan Manipulasi Obyek Pengguna diminta melakukan interaksi melalui marker interaksi dengan cara melakukan seleksi obyek pada tampilan. Pengguna kemudian memilih obyek menu game. Dengan alat interaksi pengguna diminta untuk melakukan grabbing obyek, lalu moving alat interaksi yang sudah menangkap obyek tersebut. Tahap berikutnya, pengguna diminta untuk menaruh obyek ditempat lain di sekitar marker area dengan cara memiringkan alat interaksinya (dropping). Kegiatan tersebut dilakukan berulang-ulang sehingga semua obyek berhasil dipindahkan. Dalam skenario game AR tsunami dimaksudkan bahwa pengguna bertugas mengamankan harta bendanya dari posisi semula ke zona aman dari ancaman tsunami yang akan datang. Item ini ingin mengetahui kesan pengguna atas kegiatan seleksi dan manipulasi obyek tersebut. Pada tahapan ini pengguna diringi dengan bunyi alarm bahaya peringatan tsunami. Adapun pertanyaan yang diajukan adalah sebagai berikut. Bagaimanakah tanggapan anda ketika melakukan seleksi pada obyek virtual dengan alat interaksi? (Canggung-Alami). Bagaimanakah tanggapan anda ketika melakukan grabbing obyek virtual dengan alat interaksi?

7 (Canggung-Alami). Bagaimanakah tanggapan anda ketika melakukan dropping obyek virtual dengan alat interaksi? (Canggung-Alami). Bagaimanakah kesan anda ketika menyentuh dan moving obyek virtual dengan alat interaksi? (Canggung-Alami). Bagaimanakah kesan anda ketika obyek virtual disentuh dengan alat interaksi, ukurannya berubah menjadi lebih besar? (Tidak tertarik-tertarik)... Pengujian akhir Pengguna ditanya tentang pengalaman keseluruhan terhadap sistem dan diminta suatu komentar jika menginginkannya. Pertanyaannya adalah sebagai berikut. Alat interaksi tersebut susah digunakan secara efektif. (Tidak setuju-setuju). Komputer selalu menampilkan keinginan anda melalui alat interaksi. (Tidak setuju-setuju). Alat interaksi yang digunakan cocok untuk lingkungan AR. (Tidak setuju-setuju). Tampilan menu dan interaksi cocok untuk sistem tersebut. (Tidak setuju-setuju). Iringan bunyi pada interaksi tersebut cocok dengan topik game AR tsunami. (Tidak setuju-setuju). Bagaimanakah kesan umum dari sistem tersebut? (Membosankan-Mengasyikan). Bagaimanakah pendapat Anda mengenai sistem tersebut? (Sulit dioperasikan-mudah dioperasikan).

8 . Hasil Hasil dari kuesioner pengguna dipaparkan berikut dan didiskusikan lebih rinci pada subbab.. Adapun daftar kuesioner pengujian dapat dilihat pada LAMPIRAN A... Lingkungan AR Gmb. menunjukkan hasil umpan balik pengguna yang dicatat pada kuesioner untuk pengujian bagian pertama, ketika pengguna ditunjukkan obyek-obyek virtual berada di atas marker. Masing-masing grafik menunjukkan rata-rata tanggapan pengguna untuk pertanyaan tersebut dengan rentang skor - pada skala yang ditunjukkan sumbu Y untuk setiap grafik. Tidak tertarik Tertarik AVG =, STDEV =,7. Bagaimanakah kesan Anda ketika melihat obyek virtual berada di atas dunia nyata (marker)?

9 Tidak terarik Tertarik. Bagaimanakah kesan Anda ketika menyentuh obyek virtual dengan tangan Anda? AVG =, STDEV =, Rendah Tinggi,,,,, AVG =, STDEV =,8. Bagaimanakah tingkat kualitas visual dari model obyek virtual yang ditampilkan? Gmb. Grafik hasil kuesioner item sampai dengan item. Gmb. Tampilan tombol virtual menu game dan alat interaksi.

10 Gmb. Tampilan obyek mobil dan gedung serta alat interaksi... Seleksi dan Manipulasi Obyek Gmb. menunjukkan hasil umpan balik pengguna yang dicatat pada kuesioner untuk pengujian bagian kedua, dimana pengguna mulai melakukan interaksi dengan marker sebagai pointer untuk memilih menu yang disediakan. Untuk berinteraksi dalam skenario game tsunami, pengguna diminta memilih menu game tsunami. Gmb. Pengguna melakukan grabbing terhadap obyek gedung yang diperbesar.

11 Gmb. Pengguna melakukan grabbing terhadap obyek mobil yang diperbesar. Gmb. Pengguna memindahkan obyek gedung yang nempel pada marker interaksi. Gmb.7 Pengguna memindahkan obyek mobil yang nempel pada marker interaksi.

12 Gmb.8 Pengguna menaruh (dropping) obyek gedung di posisi baru dengan cara memiringkan alat interaksi. Gmb.9 Pengguna menaruh (dropping) obyek mobil di posisi baru dengan cara memiringkan alat interaksi. Obyek-obyek yang harus di-grab diperlihatkan. Pengguna diminta melakukan grabbing dengan alat interaksi. Obyek yang berhasil di-grab lalu digerak-gerakkan untuk dipindahkan ke lokasi lain (zona aman tsunami). Pengguna diminta menaruh obyek hasil grabbing dengan cara memiringkan alat interaksi ke arah posisi baru dari marker area. Masing-masing grafik menunjukkan rata-rata tanggapan pengguna untuk pertanyaan tersebut dengan rentang skor pada skala yang ditunjukkan sumbu Y untuk setiap grafik.

13 Canggung Alami AVG =,7 STDEV =,. Bagaimanakah tanggapan Anda ketika melakukan seleksi pada obyek virtual dengan alat interaksi? Canggung Alami AVG =. STDEV =,. Bagaimanakah tanggapan Anda ketika melakukan grabbing obyek virtual dengan alat interaksi? Canggung Alami AVG =, STDEV =,. Bagaimanakah tanggapan Anda ketika melakukan dropping obyek virtual dengan alat interaksi? 7

14 Tidak tertarik Tertarik AVG =, STDEV =, 7. Bagaimanakah kesan Anda ketika menyentuh dan memindahmindahkan obyek virtual dengan alat interaksi? Tidak tertarik Tertarik AVG =, STDEV =,9 8. Bagaimanakah kesan Anda ketika obyek virtual disentuh dengan alat interaksi, ukurannya berubah menjadi lebih besar? Gmb. Grafik hasil kuesioner item sampai dengan item 8... Hal-hal Umum Gmb. menunjukkan hasil umpan balik pengguna yang dicatat pada kuesioner setelah pengujian dituntaskan. Pengguna secara sederhana memberikan rating opininya untuk pengalaman secara keseluruhan. Masing-masing grafik menunjukkan rata-rata tanggapan pengguna untuk pertanyaan tersebut dengan rentang skor pada skala yang ditunjukkan sumbu Y untuk setiap grafik. 8

15 Tidak setuju Setuju AVG =, STDEV =, 9. Alat interaksi tersebut susah digunakan secara efektif. Tidak setuju Setuju AVG =, STDEV =,8. Komputer selalu menamplkan keinginan Anda melalui alat interaksi. Tidak setuju Setuju AVG =,8 STDEV =,8. Alat interaksi yang digunakan cocok untuk lingkungan augmented reality. 9

16 Tidak setuju Setuju AVG =, STDEV =,8. Display menu dan interaksi cocok untuk sistem tersebut. Tidak setuju Setuju AVG =, STDEV =,9. Iringan suara pada interaksi tersebut cocok dengan topik game augmented reality tsunami. Gmb.Grafik hasil kuesioner item 9 sampai dengan item... Tanggapan keseluruhan Untuk setiap tahap dalam pengujian, pengguna ditanya perasaannya rasakan terhadap aspek sistem, lebih khusus tanggapan terhadap kemudahan penggunaannya. Hasil untuk masing-masing tahap dalam proses pengujian ditunjukkan dalam Gmb., dengan rentang skor - pada skala yang ditunjukkan sumbu Y setiap grafik.

17 Membosankan Mengasyikan. Bagaimanakah kesan umum dari sistem tersebut? AVG =, STDEV =, Sulit dioperasikan Mudah dioperasikan AVG =, STDEV =,. Bagaimanakah pendapat Anda mengenai sistem tersebut? Gmb. Grafik hasil kuesioner item sampai dengan item.. Pembahasan.. Lingkungan AR Kebanyakan pengguna nampak menikmati lingkungan AR karena umumnya baru mencoba melihat obyek virtual dapat ditampilkan di atas marker. Ini memberikan reaksi sangat positif terhadap lingkungan AR. Pengguna penasaran untuk bertanya kenapa hal demikian dapat terjadi. Sekilas memang sepertinya hal yang ajaib. Namun demikian, beberapa kesulitan dihadapi pengguna karena mereka harus mencoba melakukan tracking kamera. Tetapi dengan antusias mereka mencoba-coba mengatur jarak kamera dengan marker dan mengubah-ubah letak marker.

18 Ketika obyek virtual hilang mereka mencoba lagi mencari-cari kondisi untuk mendapatkan gambar yang optimal. Kadang-kadang mereka mencoba menghalangi kamera, meletakkan tangan atau benda di atas marker, dan bahkan penasaran ingin mencoba memegang obyek virtual dengan tangan. Hal demikian tentu saja dapat mengakibatkan hilangnya tampilan obyek virtual di atas marker. Beberapa pengguna memberikan komentar bahwa kualitas gambar dari obyek virtual masih belum bagus. Penulis menyadari bahwa untuk tahap versi awal ini format gambar masih menggunakan format DS Max. Dapat saja versi selanjutnya untuk mendapatkan kualitas gambar yang lebih baik dicoba dengan format vrml... Seleksi dan Manipulasi Obyek Pada tahap ini pengguna sudah mulai mengenal lingkungan AR. Mereka diminta untuk melakukan percobaan seleksi tombol pada menu virtual. Dalam skenario AR tsunami, terdapat tiga pilihan tombol yang dapat dipilih pengguna. Ada tombol play intro, animasi tsunami, dan game tsunami. Masing-masing tombol oleh pengguna dipilih menggunakan marker interaksi. Reaksinya satu per satu dicermati. Pada mulanya pengguna agak kesulitan untuk melakukan seleksi tombol ini. Hal demikian wajar karena disana harus terjadi adanya collission atau menyentuh antara posisi marker interaksi dengan obyek tombol virtual di lihat dari posisi kamera. Ketika pengguna berhasil melakukan seleksi pada tombol game tsunami, sistem menampilkan obyek-obyek tiga dimensi yang terdiri dari obyek mobil, gedung, dan meja. Merujuk pada skenario game tsunami, obyek-obyek tersebut oleh pengguna harus diambil satu per satu untuk kemudian dipindahkan dari posisi semula ke posisi baru. Posisi tersebut merupakan posisi zona aman yang tidak akan tersentuh tsunami. Sebelum melakukan pengambilan obyek, emosi pengguna dipicu dengan bunyi alarm pertanda bahaya tsunami akan tiba. Selanjutnya dengan alat interaksi, pengguna mencoba mengambil salah satu obyek. Untuk mengambil obyek diperlukan keterampilan menempatkan marker interaksi agar tepat dengan obyek yang akan

19 diambil. Baru setelah obyek terambil, maka obyek yang ada di marker berpindah dan menempel pada marker interaksi. Untuk menambahkan kesan, obyek-obyek yang berhasil diambil dimunculkan dengan ukuran yang diperbesar dari ukuran semula ketika ada di marker area. Teknik ini menggunakan konsep scaling. Pengguna kemudian menggerak-gerakkan marker interaksi yang sudah ditempeli obyek hasil proses grabbing. Selama menggerakkannya itu masih dalam jangkauan penglihatan kamera, maka obyek yang menempel di marker interaksi tetap ada. Tetapi terjadi invisible manakala marker interaksi digerakkan di luar area tracking kameranya. Permasalahan muncul ketika ingin menaruh obyek hasil grabbing di posisi baru di marker area. Beberapa pengguna kelihatan canggung ketika memiringkan obyek yang akan dijatuhkannya. Hal demikian karena pengguna tidak langsung mengetahui rahasia sebenarnya pada kemiringan berapa dan ketinggian berapa menjatuhkan obyek hasil grabbing tersebut. Sistem yang dirancang memungkinkan proses dropping obyek dengan ketinggian kurang dari cm dari atas permukaan marker area dan kemiringan kurang dari lalu pelan-pelan diangkat ke atas. Jika kondisi tersebut semuanya terpenuhi, maka obyek dengan mudah ditaruh di posisi baru. Setelah berulang-ulang dicoba, akhirnya pengguna menjadi terbiasa melakukan dropping obyek dengan kondisi yang alami... Hal-hal Umum Ketika pengguna ditanya tentang kecocokan alat interaksi yang digunakan, rata-rata mereka memberikan rating penilaian, dari rentang skor - di antara tidak setuju dan setuju. Hal demikian mengindikasikan bahwa mungkin saja pengguna belum mengetahui jenis interaksi apa sajakah yang ada di lingkungan AR. Atau mungkin mereka tidak peduli dengan jenis interaksi yang ada, yang penting mencoba mengikuti format evaluasi yang diberikan. Akan tetapi dengan bobot rata-rata penilaian pengguna tersebut tampak cenderung setuju dengan alat interaksi yang digunakan, bahkan hasil penilaian tersebut sejalan dengan pertimbangan ketika

20 melakukan perancangan awal bahwa untuk melakukan fungsi interaksi seleksi dan manipulasi obyek virtual dalam lingkungan AR, maka alat interaksi yang cocok adalah menggunakan marker sebagai pointer. Yang menarik ketika kebanyakan memberikan komentar terhadap iringan bunyi yang menyertai interaksi. Bunyi yang diperdengarkan adalah bunyi alarm tanda bahaya yang dapat memicu ketegangan. Interaksi dilakukan selama dua menit dan harus menyelesaikan proses evakuasi barang-barang (obyek virtual) dengan cara grabbing, moving, dan dropping obyek sambil diiringi bunyi yang menegangkan... Tanggapan keseluruhan Umumnya, pengguna memberikan umpan balik positif dan menghargai teknik interaksi tangible menggunakan marker sebagai pointer. Hasil kuesioner juga merupakan petunjuk opini pengguna terhadap sistem yang dirancang. Proses pengujian berguna untuk meningkatkan pemecahan masalah-masalah usability dan saran-saran perbaikan. Untuk dapat familier dengan lingkungan AR, maka perlu melakukan pelatihan dan pendampingan bagi pengguna untuk mengoperasikannya, karena di sanalah akan muncul kesulitan atau kemudahan pengoperasian sistem. Semakin dilatih dan diberikan porsi waktu yang lebih lama untuk mencoba-coba sistem, maka akan semakin mudah sistem dioperasikan. Dari pengguna yang mengisi kuesioner, umumnya mereka memberi bobot penilaian dengan rata-rata, terhadap point opini kesulitan dan kemudahan pengoperasian sistem. Penilaian itu tentu saja muncul setelah pengguna berhasil menjalani tahap evaluasi dan mendapatkan respon positif dari sistem yang dicobakan. Kemudahan dan keluwesan metoda interaksi dari sistem yang dirancang tidak memerlukan waktu yang lama untuk beradaptasi dalam mengoperasikannya.