Mengapa evaluasi dibutuhkan?

Transkripsi

1

2

3 Mengapa evaluasi dibutuhkan? Desainer tidak dapat berasumsi bahwa orang lain seperti dirinya, dan mengikuti design guidlines menjamin bahwa karyanya pasti bagus. Evaluasi dibutuhkan untuk memeriksa apakah user dapat menggunakan produk tersebut dan menyukainya. Evaluasi kepuasan penggunaan terhadap sebuah produk dapat dilakukan menggunakan kuesioner dan atau interview. 3

4 Kapan evaluasi dilakukan? Evaluasi dapat dilakukan pada : Selama proses pembuatan produk tersebut supaya selalu sama dengan yang diminta atau dibutuhkan oleh user. Proses ini biasa disebut formative evaluations. Saat produk tersebut telah jadi yaitu melalui prototype. Saat produk dipasarkan, melalui update version. Evaluasi produk dapat dilakukan melalui riset pasar, baik melalui perorangan atau sekelompok user. 4

5 Tujuan Evaluasi Ada 3 tujuan utama dari evaluasi Melihat seberapa jauh sistem berfungsi Melihat efek interface dari pengguna Mengidentifikasi problem khusus yang terjadi pada sistem. 5

6 Teknik-teknik evaluasi Observing users Asking users their opinions Asking expert their opinions Testing user s performance Modeling user s task performance to predict efficacy of user 6

7 Hubungan antara paradigma dan teknik evaluasi Teknik Observing users Asking users Asking experts User testing Quick and Dirty Penting untuk melihat bagaimana user berperilaku dalam lingkungan aslinya Diskusi dengan user yang potensial dalam suatu group atau group khusus Untuk mendapatkan kritik tentang kegunaan sebuah prototype ======== Modelling user task performance ======== 7

8 Hubungan antara paradigma dan teknik evaluasi Teknik Usability Testing Observing users Asking users Melalui video dan catatan, dilakukan analisa identifikasi masalah, investigasi cara kerja software atau menghitung kinerja waktu Dengan menggunakan kuesioner kepuasan sebagai pengumpulan opini user, kadang menggunakan interview untuk opini yang lebih detail. Asking experts ======== User testing Dilakukan di laboratorium Modelling user task performance ======== 8

9 Hubungan antara paradigma dan teknik evaluasi Teknik Field Studies Observing users Asking users Dilakukan dilokasi manapun juga. Dalam studi ethnografi, evaluator turut serta dalam lingkungan user Evaluator dapat melakukan interview atau mendiskusikan apa yang dilihatnya kepada peserta. Asking experts ======== User testing ======== Modelling user task performance ======== 9

10 Hubungan antara paradigma dan teknik evaluasi Teknik Observing users Asking users Asking experts User testing Modelling user task performance Predictive ======== ======== Seseorang menggunakan patokannya dalam pembuatan desain untuk memprediksi interface ======== Model yang digunakan untuk memprediksi interface atau membandingkan kinerja waktu dengan versinya. 10

11 Skala Likert Merupakan skala yang cukup banyak digunakan untuk melakukan evaluasi Ukuran skala mulai dari 4 sampai 7 Ukuran 4 (1=sangat buruk, 2= buruk, 3=bagus, 4=sangat bagus) Ukuran 5 (1=sangat buruk, 2= buruk, 3=netral, 4=bagus, 5=sangat bagus) Ukuran 7 (1=sangat buruk, 2= buruk, 3=agak buruk, 4=netral, 5=agak bagus, 6=bagus, 7=sangat bagus) Pada umumnya penelitian menggunakan 5 skala. 11

12 Contoh Evaluasi Kriteria Evaluator Rata-rata Layout Kecepatan Akses Prosedur Akses Perpaduan Warna Informasi Up To Date Rata-rata 3.76 Secara keseluruhan pendapat para evaluator adalah netral karena nilai rata-rata=3.76 Kriteria yang paling bagus adalah Informasi UpToDate, sedangkan yang perlu mendapat perhatian adalah Perpaduan Warna. 12

13 GROUPWARE CSCW (Computer Supported Cooperative Work)

14 Apa itu Groupware? Software yang khusus dirancang untuk mendukung pekerjaan kelompok yang membutuhkan kerjasama. Fungsinya tidak hanya alat untuk komunikasi. Groupware dapat diklasifikasikan dengan kapan dan di mana para partisipan bekerja fungsi itu melakukan kerja kooperatif Terdapat berbagai masalah yang spesifik dan sulit dengan adanya implementasi groupware. 14

15 The Time/Space Matrix Mengklasifikasikan groupware dengan: Ketika (when) partisipan bekerja, pada waktu yang sama atau tidak Dimana (where) para partisipan bekerja, di tempat yang sama atau tidak Nama untuk sumbu matrix: time (waktu): synchronous/asynchronous place (tempat): co-located/remote same time different time same place different place 15

16 Time/Space Matrix Co-Located same place Remote different place Synchronous same time face-to-face conversation telephone Asynchronous different time post-it note letter 16

17 Classification by Function Cooperative work involves: Participants who are working Artefacts upon which they work understanding participants P direct communication P control and feedback Artefact : tempat bekerja artefacts of work A 17

18 What interactions does a tool support? computer-mediated communication direct communication between participants meeting and decision support systems common understanding shared applications and artefacts control and feedback with shared work objects meeting and decision support systems common understanding understanding participants P direct communication P control and feedback computer-mediated communication direct communication between participants artefacts of work A shared applications and artefacts control and feedback with shared work objects 18

19 Time/space matrix revisited co-located remote synchronous meeting rooms video conferences, video-wall, etc. shared work surfaces and editors shared PCs and windows asynchronous argumentation tools and electronic conferences co-authoring systems, shared calendars 19

20 Computer-Mediated Communication and bulletin boards structured message systems text messaging -sms video, virtual environments

21 and bulletin boards asynchronous/remote Paling familiar dan groupware yang tersukses Recipients of direct in To: field copies in Cc: field Pengiriman identik-berbeda dalam hal tujuan sosialnya 21

22 vs. bulletin boards fan out one-to-one , direct communication one-to-many , distribution lists BBs, broadcast distribution control sender , private distribution list administrator , shared distribution list recipient BBs, subscription to topics 22

23 Structured message systems (ctd) Type: Seminar announcement To: all From: Alan Dix Subject: departmental seminar Time: 2:15 Wednesday Place: D014 Speaker: W.T. Pooh Title: The Honey Pot Text: Recent research on socially constructed meaning has focused on the image of the Honey Pot and its dialectic interpretation within an encultured hermeneutic. This talk 23

24 Meeting And Decision Support Systems argumentation tools (alat bantu argumentasi) meeting rooms (ruang pertemuan) shared drawing surfaces (berbagi bidang gambar)

25 Meeting and Decision Support System Dalam desain, manajemen dan penelitian, kita ingin: menghasilkan ide-ide mengembangkan ide-ide merekam ide-ide penekanan utama pemahaman umum 25

26 Three types of system argumentation tools asynchronous co-located Mencatat argumen-argumen untuk keputusan desain meeting rooms synchronous co-located Dukungan elektronik untuk pertemuan tatap muka shared drawing surfaces synchronous remote Saling berbagi papan gambar yang dalam jangkauan 26

27 argumentation tools asynchronous co-located Seperti hipertext untuk menyimpan design rationale (dasar pemikiran desain) Tujuan : Mengingatkan desainer mengenai alasan-alasan atas pengambilan keputusan Dasar pemikiran komunikasi di antara team desain. 27

28 Meeting rooms synchronous co-located Ruang pertemuan yang dirancang menggunakan peralatan elektronik untuk pertemuan tatap muka Terminal individu Layar lebar yang bisa berbagi Software khusus Kursi-kursi yang ditata berbentuk huruf U atau C di sekitar layar Mode-mode yang bervariasi: brainstorming, penggunaan pribadi, WYSIWIS WYSIWIS what you see is what I see Semua layar menunjukkan citra yang sama Semua partisipan dapat menulis dan menggambar ke layar. 28

29 Typical meeting room shared screen 29

30 Shared Applications And Artefacts shared PCs and windows shared editors, co-authoring tools shared diaries communication through the artefact

31 Frameworks For Groupware time/space matrix shared information communication and work awareness (kesadaran)

32 Implementasi Groupware umpan balik dan delay pada jaringan arsitektur groupware feedthrough and network traffic graphical toolkits, robustness and scaling

33 Hypertext Multimedia and the World-Wide Web

34 Hypertext - not just linear non-linear structure blocks of text (pages) links between pages create a mesh or network users follow their own path through information bookmark home this is text or is it hypertext only links can tell this is text or is it hypertext only links can tell this is text or is it hypertext only links can tell this is text or is it hypertext only links can tell this is text or is it hypertext only links can tell back link external link this is text or is it hypertext only links can tell this is text or is it hypertext only links can tell this is text or is it hypertext only links can tell

35 Hypermedia not just text hypertext systems + additional media illustrations, photographs, video and sound links/hotspots may be in media areas of pictures times and locations in video also called multimedia but term also used for simple audio/video

36 WEB TECHNOLOGY AND ISSUES protocols browsers web servers and clients networking

37 Web basic,servers and clients the web protocols and standard HTTP to carry information over the internet HTML, XML and graphics formats for content browsers to view the results plus plug-ins web servers and clients the web is distributed user clicks link browser sends request GET /e3/authors.html HTTP/1.1 server finds page syuh how gtw hsio i i ert ag ty ty ghn ty ty we ghty chdi qw oatyf syuh how gtw wet dfla ght a hsio i ert ag ty ghn ty we ghty chdi qw oatyf wet dfla ght a browser displays it communicate with HTTP server sends page back syuh how gtw hsio i ert ag ty ghn ty we ghty chdi qw oatyf wet dfla ght a syuh how gtw hsio i ert ag ty ghn ty we ghty chdi qw syuh syuh oatyf how how gtw gtw wet dfla hsio hsio ght i ert ert a ag ag ty ty ghn ghn ty ty we we ghty ghty chdi chdi qw qw syuh oatyf oatyf how gtw wet wet dfla dfla hsio ght ght i ert a ag ty ghn ty we ghty chdi qw oatyf wet dfla ght a web client (browser) web server (stores pages)

38 network issues - timing QoS (quality of service) bandwidth how much information per second latency how long it takes (delay) jitter how consistent is the delay reliability some messages are lost need to be resent increases jitter connection set-up need to handshake to start

39 bandwidth, latency and jitter bandwidth how much latency how long send receive time jitter how variable

40 Web Content Static : unchanging pictures and text Dynamic : interaction and applications on the web