Standard Setting OSCE. HPEQ Project Komite Bersama Uji Kompetensi Dokter Indonesia

Transkripsi

1 Standard Setting OSCE HPEQ Project Komite Bersama Uji Kompetensi Dokter Indonesia

2 Tim Penguji OSCE 1. Wijoyo Halim - AL khaerat 2. C. Singgih Wahono - UB 3. Azwar - Unsyiah 4. Aditiawati - Unsri 5. Ernawati - Untar 6. Bernadetta Nadaek - UKI 7. Agung Dinasti Permana - Unpad 8. Dwi Savitri Rivami - UPH 9. Suyatmi - UNS 10. Erlina Marfianti - UII 11. I Wayan Suwitra - warmadewa 12. Nurhayana Unhas 2

3 Tim Penguji OSCE 13. M. Bambang Edi Susyanto - FK Universitas Muhammadiyah Yogjakarta 14. Dianawaty Amiruddin - FK Universitas Hasanuddin 15. Virn Nilasari - FK Universitas Islam Bandung 16. Reni Zuraida - FK Universitas Lampung 17. Danial - FK Universitas Mulawarman 18. Sekplin Sekeon - FK Universitas Sam Ratulangi 19. Hasanul Arifin - FK Universitas SumateranUtara 20. Nawanto - FK AtmajaYa 21. Kusmardi - FK Universitas Yarsi 22. Surya Darma - FK Universitas Sriwijaya 23. Satrio Wibowo - FK Universitas Brawijayal 24. Mohamm adzainchilmi - FK Universitas Airlangga 3

4 Narasumber 1. Gandes Retno Rahayu - FK UGM/ Jogjakarta 2. Yulherina-KBUKDI 3. Susi Susanah-FK UNPAD/Bandung 4. Nancy Margarita-FK UNAIR/Surabaya 5. E. Suryadi - FK UGM/ Jogjakarta 6. Trijoko Hadianto - FK UGM/ Jogjakarta 7. Yoyo Suhoyo - FK UGM/ Jogiakarta

5 Tujuan: mendapatkan metoda penentuan batas lulus OSCE pada setiap station. 5

6 Standard Setting Absolute Methods Anggoff (modified) Ebel Compromise Methods The Hofstee Method Borderline Group Method Borderline Regression Method 6

7 Borderline Regression Method Increasingly popular in OSCE and performance based examination In each station each examinee is assessed using two methods Check list based method (Rating Scale, Actual marck) Global performance ( fail, borderline, pass, outstanding) Data from each station is aggregated A regression equation is developed using global performance is independent variable and check list marks as dependent variable Cut-mark (standard) is the boundary between borderline and pass 7

8 Bordeline Regression Method Metode standar setting yang akan digunakan adalah Borderline Regression Method Penilaian : Actual Mark Global Rating Actual Mark Penjelasan arti nilai (0,1,2,3) pada check list actual mark harus jelas (batasannya jelas) agar penguji tidak salah mentafsirkan nilai yang ada pada check list dan tidak tumpang tindih. Global Rating diupayakan meminimalisasi aspek subyektivitas dari penilaian ( batasan operasional Global rating) 8

9 Actual mark, Checklist Sesuai dengan instruksi terhadap kandidat dan kasus atau soal yang diajukan Checklist aspekyang dinilaiatauproseduryang harus dilakukan. Checklist dengan lembar penilaian(0,1,2,3) Penguji hanya mengisi lembar penilaian tanpa intervensikecuali diinstruksikan atau disyaratkan dalam soal (instruksi penguji). 9

10 DAFTAR TILIK (CHECK LIST) PEMASANGAN INFUS NO ASPEK YANG DINILAI 1 Mengucap salam dan memperkenalkan diri 2 Cuci tangan dan gunakan sarung tangan non-steril NILAI Kandidat tidak melakukan Kandidat tidak mencuci tangan dan menggunak an sarung tangan Kandidat hanya mengucapkan salam Kandidat hanya mencuci tangan, tidak menggunakan sarung tangan Kandidat menggucapka n salam dan memperkenal kan diri Kandidat tidak mencuci tangan, langsung menggunakan sarung tangan Kandidat mengucapk an salam, memperken alkan diri menanyaka n identitas pasien Kandidat mencuci tangan dan menggunak an sarung tangan 10

11 DAFTAR TILIK (CHECK LIST) PEMASANGAN INFUS ( contreng pada kolom nilai yang sesuai) NO ASPEK YANG DINILAI NILAI Mengucap salam dan Memperkenalkan diri 2 Cuci tangan dan gunakan sarung tangan nonsteril (non-sterile gloves, CDC 2002) 11

12 Borderline Regression Method (BRM) BRM 2 penilaian: Checklist ( actual mark) Global rating Checklist (actual mark) penguji hanya memberi penilaian tanpa intervensi Dengan cara mencontreng pada lembar checklist Kemudian jumlahkan sebagai nilai total. 12

13 Global Rating Persepsi (kesan) umum dari penguji terhadap performance keseluruhan kandidat ( sesuai aspek yang diuji, mulai anamnesis s/d perilaku profesional) Global Rating 1 tidaklulus 2 borderline(minimally competence) 3 lulus 4 outstanding 13

14 Penilaian yang akan dimasukkan Total nilai : Actual Marck :... Global Rating : 1. tidak lulus 2. borderline 3. lulus 4. outstanding 14

15 Penentuan MPL Minimum Passing Level Cari titik singgung dari global rating dan actual mark sebagaimpl, cut off point Cara mencari titik singgung dengan menggunakan soft ware Excell grafik hubungan antara nilai GR dan AM Lulus MPL 15

16 MPL, 10 kandidat, 15 item, nilai(actual mark) 0,1,2 global rating 1, 2, 3, NO GR AM

17 Latihan BRM Nilai Actual Marck (0,1,2,3) dan Global Rating (1,2,3,4) dari 20 Mahasiswa peserta OSCE Station Kanulasi Vena Perifir, dengan 9-items penilaian 1. Keluarkan EXCELL Ketik di B-1, Global Rating (GR) 3. Ketik di C-1, Actual Marck (AM) 4. Ketik mulai B2 s/d B21, nilai GR 5. Ketik mulai C2 s/d C21, nilai AM 6. Block B1-B21 dan C1-C21 7. Klick Insert 8. Klick Scatter 9. Klick Scatter kiri atas 10. Klick pada Chart Layouts paling kanan 11. Klick pada axis title yg tegak, ketik Actual Marck 12.Klick pada axis title yg datar, ketik Global Rating 13. Cari titik potong nilai 2 dari Gobal Rating dengan nilai Actual Marck 14. merupakan batas nilai lulus (MPL) 15. Nilai lulus adalah nilai Actual Marck MPL 2 17

18 Global Rating Actual Marck Actual Marck ,5 1 1,5 2 2,5 3 3,5 4 4,5 Global Rating Actual Marck Linear (Actual Mar 18

19 Global Rating Actual Marck LULUS Actual Marck 8 6 Actual Marck Linear (Actual Marck) Global Rating mahasiswa, 5-items penilaian, Act.Marck (0,1,2,3) dan Global Rating (1,2,3,4) 19