LAPORAN PELATIHAN PENGUJI OSCE KG WILAYAH BARAT GEL 2 Komponen 2 - Health Professional Education Quality (HPEQ) Project Premier Basko Hotel Padang, 17-18 September 2012 Direktorat Pembelajaran dan Kemahasiswaan Direktorat Jenderal Pendidikan Tinggi Kementerian Pendidikan Dan Kebudayaan WORKSHOP KOMPONEN 2 SEPTEMBER 2012 Page 1
1. Pendahuluan Komponen 2 HPEQ Project bertujuan untuk meningkatkan kompetensi tenaga kesehatan melalui peningkatan kualitas sistem ujian. Salah satu fokus kegiatan adalah peningkatan sistem ujian dengan pengembangan metode ujian yang menguji keterampilan klinik dalam bentuk Objective Structured Clinical Examination (OSCE). Objective Structured Clinical Examination (OSCE) pada Uji Kompetensi Dokter Gigi Indonesia (UKDGI) telah tahap implementasi pada UKDGI di mulai Periode I Bulan Januari 2012. Terhadap pelaksanaan implementasi tersebut telah dilaksanakan evaluasi yang salah satu hasilnya menunjukkan bahwa salah satu titik lemah penyelenggaraan OSCE adalah banyaknya penguji yang tidak mengisi borang cek list dengan lengkap. Hal ini dapat merugikan peserta ujian karena adamya item item tertentu yang tidak diberi penilaian oleh penguji di lembar cek list. Sebagai tindak lanjut temuan tersebut dipandang perlu mengembangkan sistem ujian OSCE dalam bentuk TI (berbasis komputerisasi) dimana cek list tidak menggunakan kertas tetapi menggunakan software di komputer sehingga memudahkan para penguji dalam menilai. Pada program software ini apabila ada item cek list yang belum diisi maka secara otomatis komputer akan memberi sinyal dan dokumen tidak bisa dikirim ke server. Oleh sebab itu kemungkinan cek list tidak diisi penguji dengan lengkap bisa dihindarkan. Untuk sosialisasi dan memahami sistem pengisian cek list menggunakan program di komputer maka dipandang perlu diadakan pelatihan kepada para penguji OSCE agar mereka dapat menjalankan program tersebut, dapat digunakan dengan efektif dan efisien dan untuk meminimalisir kesulitan kesulitan yang mungkin terjadi. 2. Tujuan Tercapainya kesamaan persepsi mengenai tugas Penguji OSCE. Penguji OSCE memahami cara menilai dan mengisi Penilaian (Check List) OSCE mengunakan software di komputer. Mengurangi kesalahan Penguji OSCE dalam mengisi Penilaian (Check List) OSCE Menghasilkan metoda yang efektif dan efisien dalam ujian OSCE pada UKDGI. 3. Output Workshop Penguji OSCE memahami tugasnya, Penguji OSCE dapat memahami cara kerja program pengisian cek list berbasis software di komputer dan dapat menggunakannya WORKSHOP KOMPONEN 2 SEPTEMBER 2012 Page 2
Penguji OSCE dapat melakukan penilaian dan pengisian Lembar Penilaian (Check List) dengan benar menggunakan sistem software di komputer 4. Tempat, Waktu dan Peserta Pelatihan Penguji OSCE Kedokteran Gigi Wilayah Barat Gelombang 2 ini dilaksanakan pada tanggal 17-18 September 2012 di Premier Basko Hotel, Padang dengan mengundang penguji OSCE dari 12 IPDG yang termasuk dalam wilayah barat. Berikut adalah persyaratan peserta yang menjadi penguji OSCE: Dosen tetap, minimum bergelar Strata 2 atau Spesialis Pernah mengikuti pelatihan Penguji OSCE Nasional/ Institusional dan pernah menjadi Penguji UKDGI (Kecuali bagi IPDGI yang belum meluluskan. Membawa laptop/notebook dan mampu mengoperasikan komputer dengan baik Berikut adalah rekapitulasi jumlah peserta yang hadir dalam pelatihan kali ini: No Nama Institusi Email Tlp 1 Wilda Hafny Lubis FKG USU wilda_hafny_lubis@yahoo.com 08126000012 2 Nuridiana FKG USU nurdiana_drs@yahoo.com 081362006476 3 Olivia A Hanafiah FKG USU 0811606249 4 Suci Erawati PSKG UNPRIMA esuci64@yahoo.com 081265410449 5 Riani Setiadhi FKG UNPAD msetiadhi@yahoo.com 08122331455 6 Risti Saptarini FKG UNPAD ristisaptarini@yahoo.com 08157000890 7 Abel Tasman Yuza FKG UNPAD abelgj@yahoo.com 0817212232 8 Komang KD FKG UPDM (B) komangkrisnadewi@yahoo.com 081388992155 9 Yulia Rachma FKG UPDM (B) drg_yuliarachma@yahoo.com 081510500500 10 Evie Lamtiur P FKG UPDM (B) evie_lamtiur@yahoo.com 0818732325 11 Zaki Mubarak PSKG UNSYIAH zakimubarak54@yahoo.com 0811683054 12 Dharli Syafriza PSKG UNSYIAH dharli_s@yahoo.com 08126981978 13 Vinna Kurniawati PSKFG Maranatha vinnakurniawati@yahoo.co.id 08122115650 14 Badi Soerachman PSKG UNJANI badi_soerachman@yahoo.com 08122337998 15 Widya Irsyad FKG UNJANI widya90@yahoo.co.uk 081394622737 16 Anadina Imagita FKG UI pikik@yahoo.com,a.irmargita@gmail.com 08129272408 17 Bramma K FKG UI bramma_kusumajaya@yahoo.com 081310229064 18 Siti Triaminingsih FKG UI ami_permana@yahoo.com 08121939492 19 Didin K FKG UNAND drg_didin@yahoo.com 0811257750 WORKSHOP KOMPONEN 2 SEPTEMBER 2012 Page 3
20 Hidayati FKG UNAND hidayatiwd@yahoo.com 21 Yenita Alamsyah FKG UNBRAH alamsyah.yenita@yahoo.com 08126702965 22 Fitria Malliza FKG UNBRAH fitriamalliza_drg@yahoo.com 085263738078 23 Resa Ferdina FKG UNBRAH resa.ferdina@yahoo.com 081363233733 24 Okmes Fadriyanti FKG UNBRAH okmes_1@yahoo.com 081374444936 25 Efa Ismadiyanti FKG UNBRAH efa_ismadiyanti@yahoo.co.id 085263143729 26 Dhona Afriza FKG UNBRAH dhona_unbrah@yahoo.com 08126797983 27 Edrizal FKG UNBRAH edrizalburhan@yahoo.com 081330478336 28 Ricky Amran FKG UNBRAH 29 Arya Prasetya B PSKG FK UNSRI aryaprasetyabeumaputra@ymail.com 081373517125 30 Indrayadi Gunardi KDGI indrayadigunardi@yahoo.com 08561137211 31 Anggraeny Putri KDGI putri_secar@hotmail.com 08111903975 32 Ade Prijanti KDGI adeprijanti@yahoo.co.id 08161650582 33 Rahmi Amtha KDGI Dari total 24 peserta wajib dari 12 institusi, semua institusi telah mengirimkan perwakilannya. Beberapa institusi juga mengirimkan satu peserta tambahan, bahkan FKG Unbrah menambah 5 orang penguji mengingat lokasi institusi ini dekat dengan lokasi pelatihan sehingga tidak membutuhkan transportasi dan akomodasi khusus. Narasumber untuk pelatihan penguji OSCE ini adalah core team KG sendiri dan juga dua orang IT Pusat. Seluruh coreteam dan IT Pusat datang. Berikut adalah rekapitulasinya: No Nama Institusi Email Tlp 1 Mia Damiyanti Core Team/ FKG UI mdamiyanti@yahoo.com 0811102644 2 Boedi O Roeslan Core Team/ KDGI bo_roeslan@yahoo.com 0811906793 3 Haslinda Z Tamin Core Team/ FKG USU lid_zt@yahoo.com 08126008495 4 Mei Syafriadi Core Team/ FKG UNEJ mei_syafriadi@hotmail.com 081336181168 5 Wiwiek Poedjiastuti Core Team/ KDGI wiwiek.poedjiastoeti@gmail.com 0811977065 6 Iwan Dewanto Core Team/ PSKG UMY iwanjoe1314@yahoo.com 081578704082 7 Utmi Arma Core Team/ FKG UNBRAH utmiarma@yahoo.com 08126770599 8 Anggit Wirasto IT Pusat KDGI a.wirasto@gmail.com 081328720809 9 Herman Yuliansyah IT Pusat KDGI herman.yuliansyah@gmail.com 081328557057 WORKSHOP KOMPONEN 2 SEPTEMBER 2012 Page 4
Participation rate pada pelatihan ini sangat baik dimana semua peserta dan narasumber yang diundang hadir 100% bahkan terdapat 5 IPDG dan KDGI yang mengirimkan peserta tambahan. 5. Metode Pelaksanaan Workshop Pelatihan ini akan diberikan dengan cara: Pemaparan materi oleh narasumber Contoh kasus dan Demonstrasi/simulasi dengan OSCE-station Praktek menggunakan software cek list OSCE dengan komputer Diskusi Acara dimulai terlambat 40 menit karena ada beberapa perwakilan institusi yang belum hadir. Secara umum, acara berjalan sesuai TOR namun ada beberapa penyesuaian jadwal acara dan pemberi materi. Meskipun demikian, nilai substansi dari tiap materi yang diberikan oleh narasumber tidak berkurang. Berikut adalah rundown acara workshop pada kondisi riil: Senin, 17 September 2012 14.40 14.50 Pembukaan Boedi O Roeslan 14.50 15.10 Pengarahan OSCE UKDGI Wiwiek P 15.10 15.15 Diskusi Iwan Dewanto 15.15 15.35 Aplikasi Penilaian OSCE Berbasis Komputer Anggit Wirasto 15.35 16.30 Diskusi dan Simulasi Mei Syafriyadi 16.30-17.20 Template Soal dan Video Simulasi Wiwiek P 17.20-20.10 ISHOMA Panitia 20.10-21.00 Demonstrasi Penggunaan Check list OSCE (video 1) Anggit Wirasto Selasa, 18 September 2012 09.00-10.00 Demostrasi Penggunaan Checklist OSCE (video 2) Anggit Wirasto 09.00 10.00 Diskusi Wiwiek P 10.00-11.00 Wrap Up dan penutupan Boedi O Roeslan 6. Hasil Kegiatan Workshop ini diawali pembukaan dari Prof Boedi O Roeslan selaku Ketua KDGI terkait pelatihan ini. Prof Boedi menjelaskan bahwa pelatihan ini merupakan bagian dari TOT WORKSHOP KOMPONEN 2 SEPTEMBER 2012 Page 5
karena tidak mungkin mengundang seluruh penguji OSCE di ipdg. Oleh karena itu, perwakilan yang ikut pada pelatihan ini diharapkan dapat mengajarkan juga hal-hal yang telah diberikan kepada penguji OSCE lainnya di institusi (pelatihan serupa di tingkat institusi). Materi selanjutnya disampaikan oleh drg Wiwiek yaitu materi refreshing mengenai pelaksanaan OSCE UKDGI, peran penguji, dan beberapa hal yang perlu diperhatikan oleh penguji dalam sebuah ujian OSCE. Selanjutnya drg. Iwan Dewanto memberikan arahan mengenai aplikasi penilaian OSCE berbasis komputer. Beliau menekankan bahwa penggunaan komputer untuk penilaian OSCE ini pada awalnya memang akan lebih sulit, namun ke depannya akan mempermudah dan mempercepat analisis serta mencegah kesalahan. Untuk itu, diharapkan institusi telah mencoba dulu aplikasi ini sebelum ujian sehingga bisa didapatkan feedback dan perbaikan untuk kelancaran pada UKDGI bulan Oktober. Sesi berikutnya dilanjutkan dengan diskusi dan pemutaran video simulasi pengisian checklist dalam bentuk aplikasi komputer yang kemudian langsung dipraktekan dengan pengisian checklist komputer. Pada TOR awal, di hari kedua direncanakan ada pembagian kelompok untuk simulasi pengisian checklist ini, namun dalam pelaksanaannya, pengisian checklist komputer ini dilakukan secara bersama-sama. Berdasarkan hasil workshop yang telah dilaksanakan selama 2 hari, output dari workshop pelatihan penguji OSCE secara umum adalah sebagai berikut: No. KOMPONEN TARGET REALISASI 1. Jumlah institusi yang mengirim peserta dalam workshop 12 12 2. Jumlah peserta workshop 24 33 3. Jumlah narasumber 9 9 Berdasarkan hasil rekapitulasi output workshop secara umum, dapat disimpulkan bahwa pencapaian target workshop ini sudah optimal dalam semua komponen. Peserta diharapkan mengadakan pelatihan penguji OSCE di institusinya masing-masing. Berdasarkan kesepakatan tersebut, sebaiknya masing-masing peserta dapat menyusun plan of action yang strategis untuk mendiseminasikan materi dan skill yang didapat dalam pelatihan kali ini ke penguji OSCE lainnya di institusi masing-masing. WORKSHOP KOMPONEN 2 SEPTEMBER 2012 Page 6
7. Refleksi Setelah dilakukan analisa hasil kegiatan, selanjutnya perlu dilakukan refleksi sebagai bentuk evaluasi pelaksanaan pelatihan ditinjau dari perspektif peserta, fasilitator, dan tim monev secara umum. Berikut adalah refleksi pelaksanaan workshop dari beberapa perspektif tersebut : Gambaran Umum Participation rate dari peserta sangat baik terlihat dari jumlah penguji tambahan yang hadir untuk mengikuti pelatihan. Acara berjalan dengan lancar meskipun dari segi penggunaan waktu tidak efektif (seringkali dimulai terlambat dan selesai lebih cepat). Narasumber 1. Apakah peserta sudah memahami tugasnya sebagai penguji? Sudah, karena sudah pernah melakukan pelatihan 2. Apakah penguji OSCE sudah dapat melakukan penilaian dan pengisian lembar penilaian yang benar dengan menggunakan sistem software di komputer? Sudah, namun masih ada yang mengisinya belum lengkap Sudah, namun perlu segera melakukan TOT di masing-masing institusi 3. Apakah peserta dirasa telah mampu untuk menjadi trainer pelatihan sejenis di tingkat institusi? Iya, namun perlu bekerjasama dengan koordinator lokal dan IT lokal Kemungkinan besar bisa dan akan diuat schedule untuk memeriksa hal tersebut Sudah cukup mampu, namun perlu ditetapkan dari 3 orang yang diutus, ditetapkan 1 orang untuk bertanggungjawab mengurus pelaksanaan TOT di institusi Mampu, karena yang dikirim sudah mengerti dan memahami 4. Rekomendasi untuk perbaikan workshop ini dan strategi untuk menjaga sustainability workshop di tingkat institusi? Perlu ada monitoring serta langsung dilakukan workshop di tingkat institusi Perlu ada evaluasi pelaksanaan TOT di IPDG Tetapkan jadwal TOT di institusi Pembuatan borang evaluasi pelaksanaan TOT di tingkat institusi, permasalahan yang terjadi dan kemungkinan solusi atau jalan keluar WORKSHOP KOMPONEN 2 SEPTEMBER 2012 Page 7
Perbaikan software dimana bila penguji selesai, hasilnya dapat dilihat kembali oleh penguji. Peserta 1. Hal yang dapat menjadi kendala dalam penggunaan software untuk pengisian lemar penilaian/ checklist? Kestabilan jaringan wifi dan juga aliran listrik Kompabilitas web browser Ketidaksiapan SDM di institusi Sarana dan prasarana misal komputer dan peralatan IT lainnya Ketrampilan penguji dalam menggunakan komputer beragam 2. Hal yang perlu disempurnakan dari lembar penilaian/ checklist? Lebih detail, setiap satu prosedur dinilai dengan satu checklist, saat ini ada beberapa prosedur yang digabungkan menjadi satu penilaian, sehingga menyulitkan Lebih sering diadakan pelatihan sehingga penguji terbiasa Pemberian tanda tertentu bila ada poin yang belum terisi 3. Hal yang perlu diperbaiaki dalam persiapan pelaksanaan OSCE UKDGI ke depan? Persiapan untuk IT Keseragaman istilah atau terminologi dalam pembuatan soal Koordinasi dan persiapan dengan waktu yang lebih lama Perlu dilakukan try out untuk melihat kesiapan setiap institusi Lebih sering melakukan pelatihan untuk setiap team yang terlibat dalam OSCE UKDGI Review soal yang lebih baik lagi Perlunya pemahaman dahulu kepada setiap pengawas tentang tatalaksana dan peraturan sebagai penguji yang benar Memberikan panduan penguji 30 menit sebelum ujian dimulai Undangan untuk pelatihan dan rapat koordinasi mohon dapat diberikan minimal 1 minggu sebelumnya sehingga dapat dipilih staf yang benar-benar berkomitmen dan kompeten. WORKSHOP KOMPONEN 2 SEPTEMBER 2012 Page 8
Pemaparan terkait OSCE UKDGI telah dibawakan dengan jelas dan mudah dimengerti Pemaparan terkait Aplikasi Penilaian OSCE Berbasis Komputer telah dibawakan dengan jelas dan mudah dimengerti Video demonstrasi cara melakukan pengisian cek list OSCE dengan komputer telah membantu anda untuk memahami cara kerja dan melakukan pengisian lembar penilaian/ cek list Video pelaksanaan OSCE yang digunakan untuk simulasi pengisian lembar penilaian/ cek list OSCE cukup jelas dan memudahkan penguji untuk memahami cara kerja dan melakukan Simulasi pengisian lembar penilaian/ cek list OSCE telah membantu dan memudahkan penguji untuk memahami cara kerja dan melakukan pengisian lembar penilaian/ cek list Diskusi permasalahan dan kendala yang mungkin terjadi dalam pengisian lembar penilaian berjalan dengan baik serta membantu dan memudahkan penguji untuk memahami cara Setelah mengikuti workshop, kemampuan peserta meningkat dalam mengisi lembar penilaian/ cek list OSCE serta mampu menjadi trainer di tingkat institusi TOR kegiatan memberi gambaran pelaksanaan dan target yang hendak dicapai Responsiveness pelayanan yang diberikan oleh panitia baik Kenyamanan tempat pelaksanaan pertemuan menunjang produktivitas WO Tim Monev Feedback form didistribusikan oleh tim monev kepada seluruh peserta untuk menjaring voice of customer peserta terkait satisfaction level terhadap aspek-aspek pelaksanaan workshop. Dari 33 kuesioner, 28 yang kembali ke tim monev. Berikut adalah rekapitulasinya: Rekap Feeback Pelatihan Penguji OSCE KG Wilayah Barat Gel 2 17-18 Septemer 2012 STS TS S SS 20 18 16 14 12 10 8 6 4 2 0 18 18 18 17 16 16 16 15 15 15 13 13 12 12 11 10 10 10 10 9 1 1 1 1 1 1 0 0 0 0 0 0 0 0 0 0 0 0 0 0 Analisis lebih lanjut terhadap feedback peserta, peserta merasa pemaparan materi yang dilakukan selama pelatihan sudah diawakan dengan jelas dan mudah dimengerti serta mampu membantu peserta untuk memahami dan melakukan pengisian checklist OSCE dengan komputer. Faktor yang dinilai sedikit kurang memuaskan adalah tentang kejelasan TOR kegiatan. WORKSHOP KOMPONEN 2 SEPTEMBER 2012 Page 9
8. Rencana Tindak Lanjut Berdasarkan analisa output kegiatan, evaluasi pelaksanaan workshop, refleksi dan feedback dari peserta workshop beberapa hal yang dapat direkomendasikan sebagai bentuk improvement dan rencana tidak lanjut untuk menjaga sustainability output dan outcome dari workshop ini adalah sebagai berikut : - Pelatihan sejenis di tingkat institusi dengan jadwal yang jelas dan supervisi dari pusat (monitoring dan evaluasi) sehingga dapat dipastikan TOT berjalan di tingkat institusi - Persiapan komputer dan peralatan IT lainnya di institusi sehingga bentuk pengisian checklist berbasis komputer ini untuk OSCE UKDGI dapat segera dilaksanakan - Uji coba OSCE dengan aplikasi ini sebelum OSCE UKDGI yang sesungguhnya sehingga bila ada kendala atau masalah dapat dicarikan solusinya 9. Penutup Pengembangan sistem ujian kompetensi dokter gigi dangan menilai kemampuan psikomotor menggunakan metode OSCE merupakan terobosan baru dan akan meningkatkan kualitas tenaga kesehatan. Namun disadari bahwa metoda ini memerlukan persiapan, pelaksanaan dan evaluasi yang baik secara terus menerus, sehingga permasalahan teknis yang ada saat pelaksanaan dapat diminimalisir. Oleh karena itu senantiasa harus dilaksanakan evaluasi dan pengembangan program untuk mendapatkan metoda ujian yang baik sehingga ujian kompetensi yang merupakan high stake exam dapat tercapai pada Ujian Kompetensi Dokter Gigi Indonesia. Lampiran Point of Discussion Database Panel Expert Materi Presentasi Jakarta, 25 September 2012 Hilda Dwijayanti Asisten Monev Proyek HPEQ WORKSHOP KOMPONEN 2 SEPTEMBER 2012 Page 10