02/10/2012. Pola Laporan. persiapan pelaksanaan Hasil. Manejemen ujian. persiapan Pelaksanaan Hasil. Manejemen soal

Transkripsi

1 Pola Laporan Manejemen ujian persiapan pelaksanaan Hasil Manejemen soal persiapan Pelaksanaan Hasil 1

2 Manajemen Ujian Persiapan Pemberitahuan Pendaftaran Penerimaan pendaftaran Permasalahan Solusi Rekomendasi Pelaksanaan Melakukan kompilasi data pendaftar Verifikasi data Validasi??? Permasalahan Solusi Rekomendasi Hasil Institusi pendaftar Jumlah peserta Permasalahan solusi Rekomendasi Pra Ujian- Peserta No Registrasi Sasaran Realisasi Keterangan 1 Jumlah institusi teregistrasi 2 Jumlah peserta teregistrasi 3 Jumlah peserta terverifikasi 4 Jumlah peserta tervalidasi 5 Target waktu concern kurang 2. Informasi tidak sampai Ada beberapa data tidak sesuai dengan format Tidak dapat dilakukan karena waktu sempit - registrasi 1 bulan 1 bulan 2 minggu Libur lebaran - verifikasi 7 hari 7 hari - validasi - - Tidak dpt dilakukan - Penetapan peserta final H-14 H - 5 bentuk data sangat beragam 2

3 Permasalahan dalam Registrasi dan Solusi No Masalah Solusi 1 Petunjuk/pedoman /format pendaftaran yang di kirim ke institusi/regional tidak lengkap Format yang di gunakan sebagai pendaftaran tidak sesuai dengan format yang ada pada aplikasi 2 Waktu pendaftaran ke regional dan dari regional ke pusat tidak di tepati, karena berbagai hal, terutama libur ramadhan dan lebaran. Petunjuk/pedoman pendaftaran disusun/dirumuskan secara komprehensif, baru kemudian di kirim/di ke regional. Pengiriman petunjuk/pedoman pendaftaran hanya satu sumber Format yang di kirim sama dengan data yg sesuai dengan aplikasi Tanggal pendaftaran ke regional dan dari regional ke pusat hendaknya di tepati. Pendaftaran di luar jadwal tersebut, dinyatakan tidak diterima. Permasalahan dalam Registrasi dan Solusi N o Masalah 3 Panitia pusat masih menerima kiriman data via dari institusi-institusi di masing-masing regional, tidak melalui sub regional atau double. 4 Masih ada pengiriman data pendaftar yang belum/tidak sesuai dengan format yang disediakan, termasuk file foto dan format foto (jpeg: 600x800 fixel) Solusi Institusi hanya boleh mengirimkan data ke regional/sub regional. Panitia pusat tidak menerima data dari institusi, tetapi dari regional/sub regional. Berikan petunjuk pengisian data ke dalam format pendaftaran, termasuk cara melakukan edit foto agar sesuai dengan yang diinginkan (jpeg: 600x800 fixel) Kembalikan data pendaftar, jika ada yang tidak sesuai dengan format dan ketentuan yang diinginkan. Pada tiap kolom yang ada dalam form pendaftaran peserta di beri insert comment Data yang di kirim ke pusat adalah data bersih dari regional 3

4 Permasalahan dalam Registrasi dan Solusi No Masalah Solusi 5 Pemakaian pribadi menyulitkan identifikasi data, mengingat TO yang masuk akan tercampur lainnya 6 Format pendaftaran berubahubah 7 Respon institusi pengirim peserta try out sangat lamban Perlu dibuat tersendiri yang khusus di buat untuk keperluan pendaftaran TO Format dikembangkan oleh tim IT dan didesign sedemikian rupa sehingga pengetikan data (termasuk hurup besar/kecil) hanya akan terbaca sesuai yang diinginkan. Perlu sosialisasi yang lebih intensif melalui jejaring AIPNI dan organisasi profesi PPNI dan MTKP masingmasing daerah Pelajaran yang dapat dipetik 0 Pentingnya koordinasi antara regional dan sub regional serta panitia pusat dalam proses registrasi, verifikasi dan validasi 0 Pentingnya melibatkan MTKP dan PPNI propinsi serta AIPNI regional dalam proses tryout 0 Perlu disusun lebih teknis SOP registrasi, verifikasi dan validasi 0 Sistem registrasi dilakukan secara on line. 4

5 Registrasi, Verifikasi, dan Validasi 1. Pemberitahuan registrasi kepada seluruh institusi peserta dilakukan 3 bulan sebelum hari H (format data peserta dilampirkan). 2. Registrasi dilakukan oleh AIPNI regional (AIPNI regional akan disesuaikan dengan MTKP regional). 3. Registrasi di AIPNI regional dilakukan 2 minggu setelah pemberitahuan registrasi. 4. Masing-masing regional mengirim data jumlah peserta dan institusi pengirim (sesuai format yang berlaku [format sedang dibuat]). 5. AIPNI regional melakukan kompilasi dan verifikasi data peserta dari seluruh institusi regional. 6. AIPNI regional melakukan validasi ke institusi pengirim peserta, sehingga data menjadi sangat valid dan pasti tidak berubah lagi. 7. Data peserta yang telah sangat valid dari seluruh regional dikirim ke ke Panitia Pusat. 8. Proses dari no 4 s.d. 7 diselesaikan dalam waktu 2 minggu. 9. Bagi peserta yang terlambat mendaftar dalam periode ini, akan dimasukan dalam periode selanjutnya. 5

6 Verifikasi 1. Verifikasi dilakukan oleh pengelola regional dengan memastikan kesesuaian data antara lain nama institusi, jumlah peserta, dan kelengkapan data lainnya (sesuai format). 2. Jika terdapat data yang kurang/tidak sesuai agar langsung di sampaikan kepada institusi pengirim. 3. Institusi pengirim diminta untuk merevisi dan melengkapi data-data yang tidak sesuai atau menambahkan data, untuk selanjutnya dikembalikan ke pengelola regional. 4. Setelah data dilengkapi dan dinyatakan benar dan sesuai oleh institusi pengirim, data tersebut di kirim kembali ke pengelola regional. 5. Pengelola regional memverifikasi ulang Validasi Peserta 0 Setelah verifikasi data, proses validasi dilakukan oleh penanggung jawab regional dibantu sub regional. 0 Data yang sudah diverifikasi dibuat dalam 2 bentuk data: 0 1 data per institusi yang akan divalidasi oleh pimpinan institusi dan regional dibantu sub regional 0 1 data rekapitulasi yang akan divalidasi oleh regional dan MTKP lingkup regional bersangkutan 0 Validasi ini dibuat dalam bentuk berita acara yang ditanda tangani stake holder yang bersangkutan 0 Data hasil validasi dikirim ke penanggung jawab pusat. 0 Waktu validasi maksimal 6 hari kerja 6

7 Bank Soal Nasional ITEM WRITER (?) LOCAL ITEM BANK ADMINIST. REGIONAL ITEM BANK ADM. NATIONAL ITEM REVIEW ITEM BANK 2 (?) PANEL EXPERT NATIONAL ITEM BANK ADM. ITEM BANK- 1 (?) Try Out ITEM BANK 3 (?) ITEM SELECTION PROCESS QUESTION BOOK IBA: Ibu Tuti Herawati ITEM BANK 4 7

8 Workshop Kegiatan Fre k Item dev 4 Pddk Prof idev/rev mandiri Item Review 1 Pddk Prof Inst soal Fre k Pddk S1 Ppni (praktisi & poltekes) Institusi soal Frek Inst Soal (S1) 111 Writer <<<* 17 <<<* pddk ppni iba pddk ppni (S1/PPNI) 102 Reviewer Iba + item rev Panel expert Pddkn, ppni (kolegium) Pddkn, ppni (kolegium) 39 inst/ * 1160* Item Development N Masalah Analisa Rekomendasi O 1 Jumlah Item writer dan soal meningkat, manajemen soal lebih baik namun mengapa jumlah soal baik tidak berbeda dengan TO sebelumnya - Kualitas item writer? Kriteria sudah ada, apakah saat penunjukkan oleh institusi sudah di penuhi atau atas dasar pemerataan? - Pemahaman tentang kompetensi ners dan blue print? - waktu pelatihan terlalu singkat untuk seseorang membuat soal yg baik? - Saat ini fase capacity building? AIPNI : 1. Memberikan perhatian khusus pada pembinaan dan pengembangan metode ujian 2. Mengakselerasi terbentuknya unit assessmen di institusi 3. Meningkatkan upaya untuk pelaksanaan pelatihan item dev institusi 8

9 Lanjut.. - Ketersediaan referensi? Apakah ada referensi yang sama untuk semua institusi? - Pemahaman yang sama antar item writer terkait content? - Proses pembelajaran di institusi yang belum sama dg metode ujian 4.Mengembangkan kelompok peminatan antara institusi MTKI : mempercepat dan memperluas kemampuan item dev PPNI : menetapkan satu pola dalam pengembangan item (LPUK) Item Development Masalah Analisa Rekomendasi 2. Terdapat peningkatan workshop mandiri tetapi produktifitas soal saat mandiri masih belum banyak di terima nasional 1. Pengelolaan regional? Pengakuan? 2. Reward/punishment? 3. Keragaman peserta? 4. Komitmen item writer saat pelatihan? 5. Bagaimana dengan pengembangan institusi? 6. Apakah item dev baru sebatas workshop? 7. Implementasi? AIPNI : 1. Menyepakati terbentuknya unit assessment di institusi 2. Menyepakati model ujian institusi dg model LPUK 3. Pengembangan model reward dalam pengembangan soal 9

10 3 Kurang bervariasi Soal terkait core competency dan kurang memenuhi blue print 1. Permintaan soal yang di bawa belum sesuai dengan blue print 2. Soal yang di bawa peserta sesuai dg template 3. Soal yang di bawa banyak yang sama 4. Peserta baru sedang mau belajar menuylis soal Item Review Masalah Analisa Solusi Soal yang terkumpul tidak proporsional dg blue print, kurang variasi 1. Soal terkumpul saat idev atau irev quantity oriented? 2. Kurangnya pemahaman membuat soal sesuai dengan blue print? 3. Kemampuan penulis soal tuk menulis soal sel tertentu terbatas? 1. Saat Item dev soal telah bervariasi dengan permintaan soal sesuai blue print 2. Item dev dengan permintaan 10

11 Masalah analisa Solusi Reviewer masih perlu banyak latihan Latihan sebagai reviewer kurang Belum banyak pilihan Banyak latihan Fasilitas/support proses review belum maksimal (komputer, It) Harus menggunakan fasilitas panitia namun tidak tersedia perlu penyediaan fasilitas yang cukup Item Review Masalah Analisa Rekomendasi Penulis soal belum dapat feedback dari soal yang di buatnya Soal baik masih sedikit (kurang dari 50 %) Soal masih banyak di anggap sulit oleh peserta Daya beda masih sangat rendah Belum ada sistem yg bisa memberikan feedback ke item writer 1. Pemilihan reviewer belum terseleksi dengan baik, pemahaman reviewer ttg kompetensi belum sama (esensial), 2. Pemilihan reviewer masih berfokus pd distribusi institusi belum kualitas reviewer. IBA regional mengembalikan soal ke penulis soal sesuai dengan feedback. Pengembangan program aplikasi IBA yang dapat mengidentifikasi penulis soal 11

12 Rekapitulasi Item Review 2012 irev 1 irev 2 irev 3 target realisasi target realisasi target realisasi Reviewer institusi jumlah soal terreview * * * jumlah soal baik Total soal terreview: 2385*; Soal baik: 1354 hpeq 2012\item review I_9_10juli2012\REKAP TINJAUAN HASIL REVIEW.xlsx Panel Expert Dilakukan 2 kali dengan melibat 39 institusi (pendidikan ners, PPNI, Kolegium) dengan meilbatkan 59 expert. 0 Menghasilkan 1160 soal Masalah Analisa Rekomendasi Variasi soal Fokus pada target jumlah soal, ketersediaan variasi soal terbatas, waktu dan referensi terbatas rekap laporan manajemen soal.xlsb 12

13 EVALUASI METODA UJIAN NO. KEGIATAN TARGET REALISASI KETERANGAN 1. METODE UJIAN SEMUA KEGIATAN TO UKNI MENGGUNAKAN METODE CBT SEMUA KEGIATAN TO UKNI MENGGUNAKAN METODE CBT 2. LOKASI UJIAN MENGGUNAKAN 17 LOKASI UJIAN MENGGUNAKAN 17 LOKASI UJIAN MENGGUNAKAN CBT CENTER KEDOKTERAN 13

14 A. EVALUASI PRA UJIAN No Kegiatan Target Realisasi Masalah Solusi 1. KESIAPAN CBT Semua CBT Center yang digunakan memenuhi jumlah workstation dan jarak Workstation sesuai dengan ketentuan. Walaupun semua workstation pada CBT center sudah memenuhi ketentuan tetapi ada beberapa CBT center mempunyai jawak WS yang terlalu padat Jarak workstation belum memenuhi standar Pelunya format evaluasi dan saran dari PP ke koordinator CBT 2. RUANG BRIEFING Semua ruang briefing pada CBT yang digunakan memadai disertai fasilitas penunjang seperti LCD dan Pengeras suara Belum semua ruang briefing di CBT Center sudah siap digunakan sesuai waktunya pada H-1 (Waktu telat digunakan untuk persiapan ruangan terlebih dahulu) Keberadaan fasilitas penunjang ruang briefing belum memenuhi standar Perlunya ada panitia lokal ners yang membantu dalam persiapan ujian di CBT Center Kedokteran No Kegiatan Target Realisasi Masalah Solusi 3. FASILITAS Fasilitas PENUNJANG Penunjang yang digunakan seperti AC, Loker, Ruang Karantina memadai serta rambu-rambu sudah terpasang pada H-1 Ada beberapa CBT Center yang fasilitas penunjang belum siap digunakan pada H_1 keberadaan wc kotor, ramburambu penunjuk ruang CBT belum terpasang, serta pengumuman pembagian ruangan dan workstation belum terpasang pada H-1 Keberadaan fasilitas penunjang ujian belum terpenuhi sesuai ketentuan/sta ndar Perlunya ada panitia lokal ners yang membantu dalam persiapan ujian di CBT Center Kedokteran 14

15 B. PERSIAPAN UJIAN : BRIEFING PENGAWAS PUSAT No Kegiatan Target Realisasi 1 Kehadiran Semua PP dapat hadir tepat waktu 2. Workshop PP Semua PP mendapatkan pemahaman yang sama terhadap proses pelaksanaan TO CBT PP Terlambat 1 orang Ada beberapa PP pada saat pelaksanaan ujian tidak mematuhi petunjuk pelaksanaan ujian. 3 Pemahaman Tupoksi PP Seluruh PP memahamai ketentuan-ketentuan dalam proses pelaksanaan TO UKNI CBT Ada beberapa PP yang melaksanakan tugasnya tidak sesuai ketentuan. contoh: segel, briefing pengawas lokal dan peserta, B. PERSIAPAN UJIAN : BRIEFING PENGAWAS PUSAT No Kegiatan Target Realisasi Pembagian Semua PP mendapatkan PP hanya menandatangani 4. perangkat perangkat ujian yang penerimaan perangkat ujian ujian lengkap 5. Pengecekan perangkat ujian 6. Penjelasan pengembalia n perangkat ujian PP melakukan pengecekan kelengkapan perangkat ujian PP secara individu melakukan pengecekan perangat ujian Semua PP mendapatkan Semua PP tidak mendapatkan penjelasan tentang proses penjelasan pengembalian pengembalian perangkat perangkat ujian ujian termasuk checklist kelengkapan pengembalian perangkat ujian 15

16 MASALAH DAN SOLUSI BRIEFING PENGAWAS PUSAT NO MASALAH SOLUSI 1. Adanya kehadiran pengawas pusat Pada saat briefing belum tepat Waktu Dibuatkan standar baku toleransi keterlambatan pengawas pusat 2. TOR workshop PP belum terstandar Materi workshop yang diperoleh PP belum terstandar dan belum sesuai tahapan-tahapan ujian 3. Belum ada standar evaluasi pemahaman tupoksi PP Perlu adanya SOP materi workshop PP. Perlu SOP tentang materi briefing PP ke pengawas lokal Perlu SOP tentang materi briefing PP ke peserta Dilakukan evaluasi tentang Tupoksi PP MASALAH DAN SOLUSI BRIEFING PENGAWAS PUSAT NO MASALAH SOLUSI 4. Belum ada berita acara penerimaan perangkat ujian dari penanggung jawab pembawa perangkat ujian ke PP. Dibuatkan berita acara serah terima perangkat ujian. 5. Belum adanya check list kelengkapan perangkat ujian 6. Pengembalian perangkat ujian tidak sesuai ketentuan Dibuatkan lembar chek list kelengkapan perangkat ujian Perlunya penjelasan dan Sosialisasi PP tentang pengembalian perangkat ujian 16

17 PELAKSANAAN UJIAN H -1 BRIEFING PESERTA No. Kegiatan Target Realisasi 1. Waktu pelaksanaan Waktu pelaksanaan briefing dilaksanakan tepat waktu sesuai koordinasi di awal Semua kegiatan briefing dilakukan pada H-1 tetapi Ada beberapa CBT Waktu pelaksanaan briefing terlambat dilaksanakan terkait dengan kehadiran peserta terlambat 2. Materi Briefing dengan peserta Materi briefing dengan peserta dari pengawas pusat seragam dengan media yang seragam Ada pengawas pusat yang belum menjelaskan aplikasi CBT pada H-1 pada peserta PELAKSANAAN UJIAN H-1 BRIEFING PESERTA No. Kegiatan Target Realisasi 3. Pengecekan Lokasi Ujian 4. Distribusi kartu peserta Semua peserta di semua CBT sudah mengetahui lokasi ujiannya dan melakukan pengecekan lokasi/ruangan ujian Pada H-1 Semua kartu peserta dapat terdistribusi sesuai ketentuan Belum semua peserta mengetahui pembagian ruangan ujian dan melakukan pengecekan lokasi ujian pada H-1 dikarenakan ada beberapa CBT center belum membagi dan memasang rambu-rambu atau penunjuk pada H-1 Tidak semua kartu peserta terdistribusi pada H-1 karena beberapa peserta di beberapa CBT tidak membawa identitas berfoto 17

18 PELAKSANAAN UJIAN H_1 BRIEFING PESERTA No. Kegiatan Target Realisasi 5. Laporan pelaksanaan (H-1) di Lokasi Ujian Semua pengawas pusat melaporkan kegiatan (H-1) di lokasi ujian secara lengkap sesuai format yang disediakan Semua pengawas pusat membuat laporan pelaksanaan (H-1) di Lokasi Ujian sudah sesuai format MASALAH DAN SOLUSI - BRIEFING PESERTA NO MASALAH SOLUSI 1. Keterlambatan waktu briefing dengan peserta dan pengawas lokal Perlunya standar baku toleransi keterlambatan peserta dan pengawas lokal 2. Belum seragamnya pemberian materi briefing oleh pengawas pusat kepada peserta dan pengawas lokal 3. Belum semua kartu peserta terdistribusi pada H-1 karena belum semua peserta membawa id card berfoto Dibuatkan daftar cheklist materi briefing pengawas pusat dengan peserta serta materi briefing dengan pengawas lokal Perlunya standar baku 18

19 MASALAH DAN SOLUSI - BRIEFING PESERTA NO MASALAH SOLUSI 4. Pengecekan lokasi ujian oleh peserta belum dilakukan sesuai standar (H-1) Perlunya panitia lokal baik tim admin atau IT dari ners untuk membantu persiapan ujian spt memasang rambu-rambu, memasang pengumuman pembagian ruangan serta pengecekan workstation C. PELAKSANAAN UJIAN No Kegiatan Target Realisasi 1 Pembukaan berkas ujian Pembukaan berkas ujian dilaksanakan sesuai ketentuan Ada CBT center pembukaan berkas ujian tidak disaksikan oleh koordinator CBTnya berhubung sedang adanya kegiatan 2. Pembagian nomor login peserta 3 Waktu pelaksanaan ujian Pembagian nomor login peserta dilakukan berdasarkan urutan peserta Waktu pelaksanaan ujian dilakukan secara serentak di seluruh CBT Pembagian nomor login kepada pengawas lokal mengalami kesulitan karena disusun tidak berdasarkan nomor urut peserta Waktu pelaksanaan ujian di beberapa CBT dilaksanakan terlambat dikarenakan adanya kendala diprogram komputer seperti di UNJANI dan UMM 19

20 No Kegiatan Target Realisasi 4. Pengisian Berita Acara Pelaksaaan Ujian Pengisian berita acara pelaksanaan ujian dilaporkan secara lengkap dan detil sesuai format Belum semua pengawas pusat mengisi berita acara pelaksanaan ujian secara detil dan lengkap. 5. Penyegelan tas soal Melakukan penyegelan tas soal sesuai ketentuan Ada beberapa pengawas pusat melakukan penyegelan tas kurang benar. 6. Pengembalian Berkas Ujian Pengembalian berkas ujian sesuai dengan ketentuan Belum semua pengawas pusat mengembaikan berkas/barang sesuai dengan ketentuan: seperti hard disk demo, daftar absensi, informasi login MASALAH DAN SOLUSI PELAKSANAAN UJIAN NO MASALAH SOLUSI 1. Pembukaan berkas ujian belum sesuai ketentuan dihadiri oleh koordinator CBT Perlunya panitia lokal ners untuk persiapan menjadi koordinator CBT Ners ATAU Perlunya surat pernyataan kesiapan membantu penyelenggaraan ujian ners 2. Waktu yang diperlukan dalam pembagian nomor login peserta kurang efisien Petugas admin persiapan ujian perlu menyusun informasi login sesuai nomor urut peserta 20

21 MASALAH DAN SOLUSI PELAKSANAAN UJIAN NO MASALAH SOLUSI 3. Penyegelan tas tidak memenuhi ketentuan Perlunya materi penyegalan yang benar saat briefing PP 4. Pengembalian berkas/barang belum sesuai tas/tempat yang seharusnya Perlunya penjelasan saat briefing pada PP serta perlu adanya tanda pengenal masing-masing berkas yang sesuai dengan tempat nya. RENCANA TINDAK LANJUT 1. PERLUNYA SURAT PERNYATAAN KESIAPAN KOORDINATOR CBT, IT LOKAL MAUPUN TIM ADMIN CBT CENTER DALAM DALAM MEMBANTU PENYELENGGARAAN UJIAN NERS ATAU PERLUNYA DIBENTUK PANITIA LOKAL NERS YANG MEMBANTU PELAKSANAAN UJIAN DI FAKULTAS KEDOKTERAN BAIK SEBAGAI ADMINISTRASI MAUPUN IT LOKAL 2. PERLUNYA STANDAR BAKU MATERI WORKSHOP PENGAWAS PUSAT A. MATERI SAAT BRIEFING DENGAN PESERTA B. MATERI SAAT BRIEFING DENGAN PENGAWAS LOKAL C. MATERI TENTANG CARA PENGISIAN BERITA ACARA UJIAN BAIK PERSIAPAN MAUPUN PELAKSANAAN UJIAN D. MATERI TENTANG CARA PENGECEKAN/PERSIAPAN WORKSTATION E. MATERI TENTANG PENGEMBALIAN BERKAS UJIAN 3. PERLUNYA PENAMBAHAN PANDUAN/SOP MELIPUTI : A. SOP PENGAMBILAN TAS SOAL OLEH PP DARI PENANGGUNG JAWAB TAS SOAL B. SOP CARA PENYEGELAN TAS SOAL OLEH PENGAWAS PUSAT 21

22 Distribusi Peserta 2012 CBT: terdaftar 1449, hadir 1418 Regional 1 CBT Institusi yg terlibat Peserta terdaftar Peserta Hadir Peserta tidak hadir UNSYIAH USU UNAND UNBRAH Regional 2 & 3 CBT Institusi yg terlibat Peserta terdafta r Peserta Hadir Peserta tidak hadir YARSI UNPAD UNJANI

23 Regional 4 CBT Institusi yg terlibat Peserta terdaftar Peserta Hadir Peserta tidak hadir UMY UGM UNISSULA UNDIP Regional 5, 6 & 7 CBT Institusi yg terlibat Peserta terdaftar Peserta Hadir Peserta tidak hadir UWKS UMM UB UNUD UNLAM UNHAS Distribusi institusi peserta TO CBT: terdaftar 1449, hadir Regional Regional 2 6 (13) 5 Regional 3 9 (22) 16 Regional Regional Regional Regional 7 Total Institusi 3 ( total 53 dari 64 penyelenggara ners) 7 ( total) 90 (dari 140 penyelenggara ners) Total peserta CBT REKAP INSTITUSI.xlsx 23

24 Hasil TO UKNI Try Out Buku TOTAL 1 2 TOTAL Jumlah Peserta Jumlah Soal Nilai Rerata (+ SB) (+ 7.31) (+ 6.92) (+ 7.68) (+6.99) (+ 6.52) (+ 7.20) (+ 7.21) (+ 6.95) Nilai Tertinggi Nilai Terendah KR Rerata Indeks Kesulitan % Soal Baik Analisa hasil TO 0 Jumlah peserta untuk setiap booklet soal cukup antara minimal 350 peserta dengan distribusi penjawab telah di acak untuk setiap soal di jawab oleh institusi regional untuk menghitung validitas dan reliabilitas serta distraktor 0 Ada perwakilan regional 0 bancmarking nasional untuk setiap soal 0 Dapat melihat kemampuan institusi regional 24

25 Nilai rata rata 0 menunjukan nilai rata rata yang dapat di jawab oleh seluruh peserta dengan SD 0 Arti: masih rendah dari harapan, mungkin di sebabkan oleh berbagai faktor diantaranya : 1. Soal masih dianggap sulit : kompetensi mahasiswa kurang (kompetensi peserta kurang) 2. Kualitas soal kurang bagus, ambigue, kurang jelas, membingungkan ( penulis soal?, reviewer?, pengajaran di institusi, pola belajar institusi, dsb) 3. Proses belajar belum mengacu pada kompetensi esensial dan blue print KR 21 0 Menunjukan reliabilitas booklet soal : paling tidak harus 0,70 0 Semakin tinggi semakin reliable soal 0 KR 21 ini cukup tapi belum memuaskan karena masih ada di kisaran 70 % 0 Mungkin di sebabkan oleh : - penulis soal masih kurang dapat melihat kompetensi esensial - Kurikulum belum menggambarkan kompetensi yang hendak di capai 25

26 Tingkat kesulitan 0 Sangat di pengaruhi oleh : - kemampuan peserta - proses pengajaran yang kurang sesuai : kurang fokus - Pengajaran tidak sesuai dengan kompetensi - Proporsi pengajaran dalam kurikulum kurang sesuai - Tingkat kompetensi yang di tulis dalam soal terlalu tinggi - bentuk soal yang kurang sesuai kaedah : Tinjauan Jumlah Soal 1 Rerata 1 Jumlah Soal 2 Rerata 2 Jumlah Soal 3 Rerata 3 Jumlah Soal 4 Rerata T1-1 T1-2 T1-3 26

27 Tinjauan Jumlah Soal 1 Rerata 1 Jumlah Soal 2 Rerata 2 Jumlah Soal 3 Rerata 3 Jumlah Soal 4 Rerata T2-1 T2-2 T2-3 Tinjauan Jumlah Soal 1 Rerata 1 Jumlah Soal 2 Rerata 2 Jumlah Soal 3 Rerata 3 Jumlah Soal 4 Rerata T3-1 T3-2 T3-3 T3-4 T3-5 T3-6 T3-7 T3-8 T3-9 27

28 Tinjauan Jumlah Soal 1 Rerata 1 Jumlah Soal 2 Rerata 2 Jumlah Soal 3 Rerata 3 Jumlah Soal 4 Rerata T4-1 T4-2 T4-3 T4-4 T4-5 Tinjauan Jumlah Soal 1 Rerata 1 Jumlah Soal 2 Rerata 2 Jumlah Soal 3 Rerata 3 Jumlah Soal 4 Rerata T5-1 T5-2 T5-3 T5-4 28

29 Tinjauan Jumlah Soal 1 Rerata 1 Jumlah Soal 2 Rerata 2 Jumlah Soal 3 Rerata 3 Jumlah Soal 4 Rerata T6-1 T6-2 T6-3 T6-4 T6-5 T6-6 T6-7 T6-8 T6-9 T6-10 T6-11 Tinjauan Jumlah Soal 1 Rerata 1 Jumlah Soal 2 Rerata 2 Jumlah Soal 3 Rerata 3 Jumlah Soal 4 Rerata T7-1 T7-2 T7-3 T7-4 T7-5 T7-6 T7-7 T7-8 T7-9 T7-10 T7-11 T

30 Terima Kasih success 30