Workshop Nasional Item Review CBT Ners Gel. I Tahun 2012

Transkripsi

1 LAPORAN Workshop Nasional Item Review CBT Ners Gel. I Tahun 2012 Hotel Atlet Century Jakarta, 9-10 Juli 2012 Direktorat Pembelajaran dan Kemahasiswaan Direktorat Jenderal Pendidikan Tinggi Kementerian Pendidikan Nasional WORKSHOP KOMPONEN Juli 2012 Page 1

2 1. Pendahuluan Upaya peningkatan sistem ujian pada pendidikan keperawatan yang menjadi fokus Komponen 2 HPEQ Project mensyaratkan adanya suatu proses pembuatan soal ujian yang berkualitas,komprehensif, dan sesuai dengan kompetensi yang diharapkan. Salah satu metode ujian yang akan digunakan adalah ujian tulis. Dalam mendukung kegiatan tersebut diperlukan suatu upaya untuk membuat dan menganalisis sehingga didapatkan Bank Soal yang kredibel, melalui sistem pembuatan soal yang sesuai dengan kaedah dan berstandar nasional dan internasional. Untuk dapat melaksanakan kegiatan di atas hal yang sangat mendasar adalah menyiapkan sumber daya manusia, yang dimulai dengan pelatihan-pelatihan yang diselenggarakan secara nasional untuk dapat memperoleh pemahaman yang sama terhadap cara dan sistem review soal. Kegiatan ini melibatkan institusi pendidikan keperawatan dan organisasi profesi keperawatan. Untuk meningkatkan jumlah dan kemampuan SDM baik institusi pendidikan maupun anggota profesi Selanjutnya diikuti dengan berkembangnya sistem ujian di setiap institusi pendidikan yang pada akhirnya dapat meningkatkan proses belajar dan pencapaian nilai peserta didik yang lebih bermutu. Kegiatan item review ini merupakan salah satu proses yang harus dilalui agar soal yang akan menjadi alat evaluasi berkualitas. Item review akan memberikan kesempatan para reviewer untuk menilai kelayakan soal yang telah di buat sebelumnya. 2. Tujuan 1. Meningkatkan kemampuan SDM keperawatan dalam mereview soal. 2. Meningkatnya jumlah SDM keperawatan yang kompeten dalam review soal uji tulis yang berkualitas 3. Menghasilkan soal yang telah tereview dan berkualitas 3. Output Workshop 1. Diperolehnya reviewer soal ujian tulis yang berkualitas 2. Adanya proses akselerasi pelaksanaan pelatihan item bank secara mandiri 3. Diperolehnya soal yang berkualitas yang memenuhi syarat untuk dimasukkan dalam bank soal 4. Metode Pelaksanaan Workshop Workshop nasional item review CBT ners ini dilaksanakan pada tanggal 9-10 Juli 2012 di Hotel Atlet Century Jakarta. Jumlah peserta workshop adalah 41 peserta yang terdiri dari 27 perwakilan institusi pendidikan, 4 orang fasilitator dan 1 orang LO komponen untuk profesi ners. WORKSHOP KOMPONEN Juli 2012 Page 2

3 No Nama Institusi Keilmuan 1 I Made Kariasa AIPNI/ Jakarta venpenglit@yahoo.com 2 Masfuri PPNI/ Jakarta masfuri@yahoo.com 3 Tuti Herawati FIK UI/ Jakarta itut_herawati@yahoo.com 4 Khudazi Aulawi FIK UGM/ Yogyakarta aulawi@gmail.com 5 I Ketut Suardana PSIK UNUD/ Denpasar KMB suardanamambal@yahoo.com 6 Kumboyono PSIK FK UB/ Malang kumbo_yono05@yahoo.com 8 Takdir Tahir 9 Yuni Sufyanti PSIK FK UNHAS/ Makassar F. Kep UNAIR/ Surabaya KMB Kep Anak ns.takdirpsikuh@gmail.com yuni_psik@yahoo.com 10 Mustikasari PPNI/ Jakarta subur_ayu@yahoo.com 11 Rohman PSIK UMJ/ Jakarta KMB/KGD rohman.azzam@yahoo.co.id 12 Etika Amaliawati 13 Aat Sriati F. Kep UNPAD/ Bandung F. Kep UNPAD/ Bandung KMB-GADAR eemaliyawati@yahoo.com atau etika@unpad.ac.id aat_clarissa@yahoo.com 14 Herawati PSIK FK UNLAM Kep Komunitas nabila_sholehah@yahoo.com 15 Agus Santoso PSIK FK UNDIP/ Semarang Nursing Management cakgus2005@yahoo.com 16 Tuti Seniwati PSIK FK UNHAS Kep Anak tt_swati@yahoo.com 17 Silvia Malasari 18 Nurhidayat Jafar 19 Siti Syamsiah 20 Roymond Simamora 21 Gunawan PSIK FK UNHAS/ Makassar PSIK FK UNHAS/ Makassar STIKES Panakukang, Makasar PSIK UNEJ/ Jember Stikes Malahayati/ Lampung Kep Gerontik Komunitas Keperawatan Nursing Management Komunitas ners.silvi@gmail.com yayat_vieri@yahoo.co.id sittisyamsiah12@yahoo.co.id roymond_oy@yahoo.com iguana_2011@yahoo.com 22 Cahya Utami PSIK UNUD/ Denpasar Kep Anak cahya_udiyana@yahoo.com 23 Ni Luh Satriani Stikes Bali/ Denpasar Maternitas my_adinda27@yahoo.com Ariani Arista Nursing 24 PSIK UGM/ Yogyakarta Putri Management alfa_rosyida@yahoo.com Stikes A. Yani/ 25 Weny Savitri KMB-GADAR wenny_savitri2007@yahoo.com Yogyakarta WORKSHOP KOMPONEN Juli 2012 Page 3

4 26 Listyana Natalia 27 Dian Ramawati 28 Aida Rusmariana PSIK Univ. Respati/ Yogyakarta PSIK Unsoed/ Purwokerto Stikes Muh. Pekajangan/ Pekalongan Kep Anak Kep Anak Kep Anak 29 Evi Karota Bukit F. Kep USU/ Medan Kep Komunitas 30 Ismayadi F. Kep USU/ Medan Komunitas 31 Irna Nursanti PSIK UMJ Jakarta Maternitas PSIK FK UIN SH/ Sp. Kep. 32 Irma Nurbaeti Jakarta Maternitas 33 Sri Hartini PSIK UGM/ Yogyakarta Kep Anak 34 Solikin 35 Bambang Suparno 36 Cahyu Septiwi Stikes Muh. Banjarmasin KMB Stikes Papua/ Sorong KMB Stikes Muh. Gombong/ Kebumen KMB 37 Sri Sumaryani PSIK UGM/ Yogyakarta Maternitas 38 Argi Virgona B 39 M Saefulloh Stikes Ahmad Yani/ Cimahi Stikes Indramayu/ Indramayu KMB Nursing Management argie_virgona@yahoo.co.id mumet_plumbon@yahoo.co.id 40 Rohman PSIK UMJ/ Jakarta KMB rohman.azzam@yahoo.co.id 41 Susi Widiawati Stikes Harapan Ibu/ Jambi Kep Anak susi_hasby@yahoo.co.id Participation rate peserta workshop ini sudah baik yaitu 98%. Pada saat workshop, para reviewer dibagi menjadi 10 kelompok kecil untuk mempermudah proses review soal berdasarkan peminatan keilmuan keperawatan. Dalam proses review, seluruh kelompok dipandu oleh fasilitator yang berasal dari profesi ners yaitu, I Made Kariasa, Masfuri, Kumboyono, Tuti Herawati, Khudazi Aulawi dan Ketut Suardana. Hal yang perlu disorot dari workshop kali ini adalah bahwa semua fasilitator dan LO sudah berasal dari profesi ners. WORKSHOP KOMPONEN Juli 2012 Page 4

5 Rencana kegiatan di mulai sesuai yang tertera pada TOR. Berikut adalah rundown acara workshop pada kondisi riil : Senin, 9 Juli 2012 Waktu Agenda PIC Pembukaan dan pengaharan workshop I Made Kariasa Penjelasan mengenai Item Review dan Daftar Tilik Tuti Herawati Kaji Ulang Kelompok Fasilitator ISHOMA Kaji Ulang Kelompok Fasilitator Selasa, 10 Juli Kaji Ulang Kelompok Fasilitator Wrap up dan rencana tindak lanjut Masfuri & Tuti Herawati 5. Hasil Kegiatan Workshop ini diawali dengan pembukaan oleh I Made Kariasa dan dilanjutkan dengan penjelasan mengenai item review dan daftar tilik oleh Tuti Herawati. Pada saat acara dimulai, peserta yang berjumlah 41 orang dibagi menjadi 10 kelompok kecil dan didampingi oleh fasilitator. Target untuk seluruh kelompok harus mereview soal sebanyak 650 soal. Pada saat pengerjaan soal, peserta tidak boleh menggunakan laptop sendiri dan akses internet, namun setiap kelompok di perbolehkan hanya menggunakan laptop dan flasdisk yang di sediakan oleh fasilitator. Berdasarkan hasil workshop yang telah dilaksanakan selama 2 hari, output dari workshop item review CBT ners secara umum adalah sebagai berikut : Soal Berdasar Keilmuan Soal Baik Soal tereview KMB Jiwa Maternitas Anak Manajemen Komkelger TOTAL Dari total target soal untuk workshop 2 hari yaitu harus mereview 650 soal dan hasilnya melebihi target, yaitu berhasil direview 855 soal. Walaupun workshop ini merupakan workshop review soal, namun reviewer di harapkan membawa soal di setiap pertemuan. Soal yang di buat akan di tampung, namun tidak di review saat pertemuan, karena soal tidak boleh di review oleh pembuat soal sendiri. WORKSHOP KOMPONEN Juli 2012 Page 5

6 Berdasarkan hasil review, diperlukan penambahan soal dari tiap bidang ilmu dengan rincian sebagai berikut : Bidang keilmuan KMB dan kegawatdaruratan TIK, legal,budaya = 30 soal Pengembangan profesional = 30 soal Afektif = 30 soal Evaluasi = 50 soal Rehabilitasi =50 soal Bidang keilmuan anak dan maternitas; Afektif = 10 soal Belajar = 10 soal Rehabilitasi = 10 soal Peka budya = 10 soal Evaluasi = 10 soal Bidang keilmuan komkelger; Pekabudaya = 10 soal Afektif = 10 soal Promotif = 10 soal Rehabilitatif = 10 soal Belajar = 10 soal Nilai/ keyakinan = 10 soal Bidang keilmuan Jiwa dan Manejemen; Pengembangan professional = 10 soal Komunikasi = 10 soal Afektif = 10 soal Etik legal = 10 soal Preventif = 10 soal Pengembangan profesional = 10 soal Sedangkan dari sisi tema soal, yang perlu di tambahkan yaitu; pengenceran obat, cara penyuntikan, infeksi nosokomial, pencegahan cedera, tranfusi, perawatan luka, berkabung, dokumentasi keperawatan, safety, risk management, dan pencegahan malpraktek. Khususnya untuk tema promotif perlu di tambahkan lagi soal terkait PHBS: komunitas, desa dan keluarga siaga, DOTS TB, AIDS dan malaria. Refleksi Setelah dilakukan analisa hasil kegiatan, selanjutnya perlu dilakukan refleksi sebagai bentuk evaluasi pelaksanaan workshop ditinjau dari perspektif peserta, fasilitator, dan tim monev secara umum. Melalui refleksi ini diharapkan akan teridentifikasi root of causes dari kinerja peserta dalam workshop ini. Berikut adalah refleksi pelaksanaan workshop dari beberapa perspektif tersebut : WORKSHOP KOMPONEN Juli 2012 Page 6

7 Gambaran Umum Pencapaian hasil workshop sudah cukup optimal karena jumlah soal yang telah di review melebihi target yaitu 855 soal, namun pada keilmuan KMB, Jiwa dan Komkelger target soal perlu di tingkatkan lagi dengan mengundang lebih banyak peserta yang terkait pada keilmuan tersebut pada pertemuan selanjutnya Peserta tampak antusias dalam mereview soal Hanya sedikit peserta yang membawa referensi dalam melakukan review soal Peran fasilitator sangat penting dalam proses mereview soal Beberapa hal yang perlu ditingkatkan dari pelaksanaan workshop ini adalah : Metode pelaksanaan mereview soal, dimana jumlah peserta diskusi yang berbeda tiap kelompoknya membuat output jumlah soal yang dihasilkan berbeda dan memakan waktu diskusi yang lebih lama pada kelompok diskusi yang pesertanya banyak Ketidak sesuaian jumlah peserta dengan kebutuhan target soal berdasarkan bidang keilmuan, karena ada satu peserta yang mengerjakan soal pada bidang keilmuannya sendiri Diharapkan peserta membawa referensi untuk memperlancar proses review Fasilitator dan Peserta 1. Hal-hal yang perlu diperhatikan dalam mereview soal sehingga dihasilkan soal yang berkualitas Memahami standar kompetensi ners Sensitifitas item review terhadap kompetensi ners Penyamaan persepsi tentang kompetensi & standard setting. Pemerataan/ penyebaran soal berdasarkan kompetensi diperjelas sehingga soal bervariasi Sesuaikan dengan kompetensi ners. Sesuaikan dengan standar nasional, bukan institusi Standar kompetensi ners. Blue print soal Sistematika penulisan soal yang benar. Apakah sudah sesuai dengan komplete Prinsip-prinsip penyusunan soal sesuai dengan blue print. Konsistensi latihan Vignette Konsentrasi. Mempunyai materi soal Koordinasi pembagian soal antar kelompok- efesiensi waktu & tenaga. Penyediaan referensi dari panitia Koordinasi pembagian soal antar kelompok sehingga tidak mereview soal yang sama-efisiensi waktu dan tenaga. Referensi tersedia Kompetensi yang akan digunakan pada perawat yang baru lulus Konsep dan teori terkini. Kasus-kasus yang banyak dan lazim terjadi. Tata bahasa Indonesia yang efektif dan benar Memperhatikan konsep-konsep yang terkini/ terbaru. Memperhatikan kompetensi apakah relevan/ tidak Ada sharing experimen ilmiah tentang keperawatan tertentu selama 10 menit WORKSHOP KOMPONEN Juli 2012 Page 7

8 Standar kompetensi ners. Pengalaman sebagai dosen dan pembimbing selama 5 tahun Isi soal apakah sesuai dengan ners. Tata bahasa yang digunakan, blue print, tingkat kesulitan soal, struktur soal Memahami bidang yang direview dan punya keahlian dibidang tersebut Kesesuaian dengan kompetensi ners generalis. Apakah soal tersebut memang mampu menjawab masalah yang sering dihadapi oleh ners general 2. Kendala yang dihadapi dalam mengembangkan soal Terlalu banyak soal yang sulit Banyak soal yang berspesialistik, tidak sesuai dengan kompetensi perawat baru lulus. Blue print belum seragam. Banyak soal yang terlalu teoritis, tidak menggambarkan kondisi real. Soal pengembangan profesional belum jelas Kurang referensi di ruangan. Apakah perlu klarifikasi dengan pembuatan soal Konsultan membuat kasus yang betul-betul bagus dan berkualitas Kurang nya pemahaman tentang maksud soal Keterbatasan refersi saat penyusunan soal Tiap-tiap bagian untuk membuat soal sesuai dengan item development Kompetensi. Waktu terlalu singkat Data tidak lengkap sehingga vignette perlu dirombak yang lumayan banyak. Referensi kurang Soal yang tersedia masih terlalu mental. Referensi tidak tersedia Vignette tidak berfungsi. Option pengecoh tidak berfungsi Menyusun kalimat efektif. Kasus-kasus yang lazim dikaitkan dengan aspek etik, budaya dan sikap Persamaan persepsi belum sama Kesepakatan sementara yang lebih tegas tentang kompetensi & levelnya belum ada Kerbedaan persepsi terhadap soal Kualifikasi pendidikan masih bervariasi Belum menambah teknik yang tepat dalam membuat soal Antara sistem dan option tidak sinkron 3. Kualifikasi yang harus dimiliki oleh seorang item writer CBT ners yang baik Memahami standar kompetensi dan blue print ners Memahami standard setting. Memiliki latar belakang pendidikan yang cukup Minimal S2 keperawatan atau kesehatan. Pengalaman klinik minimal 2 tahun Mempunyai pengalaman klinik dibidang/ keahliannya. Mengetahui kompetensi ners S1 Penguasaan bidang ilmu sesuai dengan aspek yang di review. Pernah mengikuti pelatihan terkait Memiliki pengalaman mengajar minimal 5 tahun Pengalaman mengajar. Berkonsentrasi dibidangnya Memiliki daya analisis, pengalaman dibidangnya masing-masing & pengetahuan WORKSHOP KOMPONEN Juli 2012 Page 8

9 komprehensif Ekspert dalam bidangnya Ners. Berpengalaman klinik. Penguasaan konsep terkini Memiliki pengalaman dibidang permintaan kurang lebih 5 tahun Minimal punya pengawas di DS / komunitas. Minimal pendidikan S2 Pemahaman terhadap kompetensi ners. Dosen dan pembimbing klinik minimal 5 tahun Kualifikasi yang sesuai dengan bidang keilmuan yang selama ini diminati. Pemahaman terhadap konten yang akan diukur Sabar, jujur dan punya tanggung jawab moral yang tinggi Pakar dibidangnya, berpangalamandalam mereview soal. Mampu membatasi kompetensi / membedakan masing-masing level 4. Strategi pengumpulan soal ditingkat institusi selama ini Mengumpulkan dari masing-masing item analisis Mengintruksikan setiap dosen untuk membuat 5 soal yang berkualitas Tiap dosen wajib mengumpulkan soal sesuai bidang ilmu. Ada item bank administrator. Terdapat proses review Meminta semua staff pengajar membuat soal ujian mengikuti pola uji kompetensi Dari tiap dosen ke penanggung jawab/ koordinator mata kuliah Mengumpulkan soal dari tim pengajar mata ajar Dikolektif oleh tim assesment fakultas. Ada pada assesment KBK saja Selama ini masih dikumpulkan oleh beberapa bagian, namun item dengan review sudah di sosialisasikan ke masing-masing bagian Rutin setiap bulan atas soal untuk latihan Sudah dikoordinir & terkumpul dari tiap bagian di program profesi Dikumpulkan di produksi lewat koordinator kurikulum & dimasukan ke dalam bank soal prodi Masih perdosen Setiap UTS / UAS soal dianalisis tingkat kesulitan oleh NEU Soal dibuat dan dikumpulkan sebelum dan sesudah semesteran Tidak ada sistem yang disepakati. Belum ada inisiatif Setiap dosen berdasarkan permintaan mengumpulkan soal. Pertemuan khusus untuk pembuatan soal rutin Dengan melakukan workshop analisis soal dan bank soal Belum bagus dan terstruktur Masing-masing dosen membuat soal- dikumpul ke koordinator MK/ blokdireview oleh tim/ departemen- masuk ke bank soal 5. Konsolidasi antara item reviewer dengan item bank administrator Harus ada mekanisme / paduan komunikasi Komunikasi yang baik dan mengumpulkan soal-soal yang berkualitas Harus ada komunikasi & kerja sama yang baik antara IR & IBA Harusnya baik, agar item yang sudah review sesuai dengan yang dimasukan ke WORKSHOP KOMPONEN Juli 2012 Page 9

10 item bank Perlu ada koordinasi & evaluasi yang baik Tim tetap berkomunikasi Kontak via mail Baik, item reviewer didampingi sampai mengerti Administratror mendampingi review & memberikan arahan yang baik Dilaksanakan workshop berkelanjutan Perlu dilaksanakan pertemuan rutin Harus dibangun mekanisme dan dibuat SOP antara item review dengan item bank administrator Belum cukup baik 6. Rencana tindak lanjut kegiatan ini ditingkat institusi Mengumpulkan soal dari masing-masing institusi Melakukan workshop Mengadakan inhouse training & institusi. Benchmarking dengan institusi lain. Try out soal Sosialisasi item review, soal ujian di institusi mengikuti pola uji kompetensi Mengadakan pelatihan item development secara rutin. Mengadakan unit assesment Pelatihan item development bagi semua tim pengajar Membuat tim soal Membuat soal-soal yang sesuai dengan teknik di item Menguji coba dan sosialisi ke semua dosen untuk membuat soal item development Mensosialisasikan hasil pelatihan Melakukan deseminasi item development oleh tim assesment Dibuat kebijakan untuk dosen dalam pembuatan soal Sosialisasi keseluruh dosen. Memotivasi sesama dosen Mensosialisasikan kaidah soal yang baik dan mampu menguji kompetensi. Melakukan review terhadap soal yang ada di institusi 6. Rencana Tindak Lanjut Berdasarkan analisa output kegiatan, evaluasi pelaksanaan workshop, refleksi dan feedback dari peserta workshop beberapa hal yang dapat direkomendasikan sebagai bentuk improvement dan rencana tidak lanjut untuk menjaga sustainability output dan outcome dari workshop ini adalah sebagai berikut : Akan lebih di fokuskan pada jumlah target soal yang belum ter review, yaitu KMB, Jiwa, dan komkelger Penambahan peserta workshop sesuai bidang keilmuan yang belum mencapai target mereview soal Target untuk review soal akan lebih di tingkatkan lagi pada pertemuan selanjutnya Reviewer di harapkan membawa soal di setiap pertemuan. Soal yang dibuat akan ditampung namun tidak di review oleh pembuat soal sendiri WORKSHOP KOMPONEN Juli 2012 Page 10

11 7. Penutup Upaya peningkatan kualitas dan kuantitas pembuatan soal diharapkan dapat terjadi bukan hanya di tingkat nasional, tapi lebih jauh sampai ke tingkat Institusi Pendidikan. Untuk itu diharapkan bahwa para peserta workshop yang terpilih dapat menjadi calon narasumber untuk pelatihan yang diadakan di tingkat regional dan lokal. Dengan demikian upaya percepatan pembuatan soal yang berkualitas ini dapat berjalan dengan baik dan memiliki dampak yang lebih bermakna. Jakarta, 12 Juli 2012 Asisten Monev, Ika Rama Nurjanah Supervisi oleh : Aprilia Ekawati Utami (Pengelola Monev HPEQ) WORKSHOP KOMPONEN Juli 2012 Page 11