Pengembangan OSCE. E.Suryadi. Assessment

Transkripsi

1 Pengembangan OSCE E.Suryadi Assessment Assessment membutuhkan measurement Measurement membutuhkan requirements yaitu: Valid (Sahih) Reliable (Handal, terpercaya) Accountable (Bisa dipertangungjawabkan) Acceptable (Bisa diterima) Economic/cost (Murah) Student learning impact / kendali /mengarahkan mahasiswa belajar 1

2 Climbing the pyramid... Does Performance assessment in vivo: Masked SPs, Video, Audits.. Shows how Knows how Knows Performance assessment in vitro: OSCE, Simulated Task-based test (Clinical/task) Context based test MCQ, essay type, oral.. Factual tests: MCQ, essay type, oral.. Materi yang dibahas Prinsip ujian OSCE secara umum Pengembangan ujian OSCE secara umum (Persiapan, Pelasanaan, Evaluasi pasca pelaksanaan) 2

3 Pengertian OSCE Merupakan ujian klinik yang terstruktur dan objektif. Terstruktur artinya ujian dilakukan dengan bahan dan metode berdasar pada tujuan bagian mana kemampuan mahasiswa yang akan diuji dan setiap mahasiswa memperoleh tugas atau soal yang sama atau setara. Objektif artinya sesuai dengan fakta selama mahasiswa melakukan ujian dan untuk melakukan penilaian dibantu oleh ceklis atau skala rating agar dapat membatasi subjektifitas observer. Bagaimana kondisi OSCE Selama ujian mahasiswa berkeliling melalui beberapa stasiun yang berurutan Pada masing-masing stasiun ada suatu tugas atau soal yang harus dilakukan/ demonstrasikan atau pertanyaan yang harus dijawab. Pada sebagian besar stasiun mahasiswa akan diobservasi oleh penguji Pada beberapa stasiun mahasiswa juga dapat diuji mengenai kemampuan menginterpretasi data atau materi klinik serta menjawab pertanyaan lisan. 3

4 Examiners Cases/Stations/Items Aturan (rules) OSCE Membuat beberapa stasiun sebagai kondisi klinik yang mendekati senyata mungkin. Dalam OSCE penilaian berdasar pada keputusan yang sifatnya menyeluruh dari berbagai komponen kompetensi Dalam setiap stasiun mempunyai materi uji yang spesifik Semua kandidat di test terhadap materi klinik yang sama Lamanya waktu untuk masing-masing stasiun terbatas 4

5 Keuntungan OSCE Face validity: mampu mempertimbangan seting klinik yang nyata dan menarik Berbagai keterampilan dengan variasi dapat diujikan dalam waktu relatif singkat. Seting kompetensi standard tertentu dapat ditetapkan Variasi pasien dan penguji dapat dikurangi Berdasar format dapat segera dilakukan umpan balik. Suatu bank stasiun OSCE dapat dikembangkan. Dapat digunakan untuk penilaian baik formatif ataupun sumatif. Format OSCE bersifat flexible Dapat digunakan untuk evaluasi kinerja pada semua level profesi. Kerugian OSCE Keterampilan dibatasi dalam lingkup tertentu sebagai ukuran, sehingga pendekatan terhadap pasien kurang menyeluruh Dibutuhkan banyak tenaga dan perlu pengorganisasian, baik dalam pengembangan, penerapan maupun pelaksanaannya Menetapkan kriteria evaluasi dan pelatihan evaluator atau observer membutuhkan banyak waktu. Dibutuhkan biaya yang mahal (banyaknya waktu dan sumber daya manusia yang harus terlibat). Dalam pelaksanaan sangat rentan terhadap kekurangan logistik 5

6 Empat tahap merancang OSCE Tahap pertama: Memilih kemampuan yang mana kandidat akan dinilai Menetapkan kaitan kemampuan diatas dengan keterampilan klinik Menetapkan jumlah dan tipe stasiun Menetapkan perbandingan jumlah stasiun yang memerlukan observer Memilih soal stasiun dari bank atau mengembangkan soal baru pada stasiun. Tahap kedua: Pengembangan masing-masing stasiun ujian Mempersiapkan atau membuat instruksi bagi mahasiswa Penyiapkan pasien simulasi termasuk kondisi yang perlu diperagakan Penyiapkan ceklist dan rating scales untuk pegangan penilaian ujian dan termasuk menetapkan kategori lulus tidaknya. Konsultasi dengan ahli atau direview oleh ahli 6

7 Tahap ketiga: Pengembangan penilaian pada masing-masing stasiun. Memasukan jawaban singkat dalam pertanyaan atau instruksi Menyiapkan blanko penilaian dan sistem penentuan skor Menetapkan kategori atau kriteria/tanda kelulusan untuk keseluruhan OSCE Konsultasikan draf ini ke ahli yang sesuai. Tahap keempat; Menindaklanjuti saran atau review para ahli klinik Melakukan revisi dan mendistribusi draf jika dipandang belum mencukupi Menetapkan jadwal Menyelesaian perlengkapan OSCE Melakukan uji coba sebelum test Melakukan test pada kandidat Menggali umpan balik dari kandidat dan semua yang terlibat 7

8 Template implementation of OSCE Judul stasiun Tujuan stasiun Candidate instructions Examiner instructions Mark Sheet Simulated patient instructions Equipment list Penulis soal dan nara sumber Referensi Kondisi kritis sebelum dan selama OSCE Dua bulan untuk persiapan adalah merupakan waktu yang sempit untuk penyelenggaraan suatu OSCE Selama observer melakukan penilaian: kesamaan pemahaman antar observer terhadap masingmasing item atau point pada ceklist atau skala rating perlu diperhatikan Keserentakan kehadiran semua instruktur yang bertugas untuk semua stasiun selama test berlangsung perlu ditekankan 8