PANDUAN LEMBAGA PENELITIANN DAN PENGABDIAN KEPADA MASYARAKAT UNIVERSITAS BRAWIJAYA

Transkripsi

1 PANDUAN EVALUASI PROPOSAL PENELITIAN DESENTRALISASI: PENELITIAN HIBAH BERSAING, PENELITIAN FUNDAMENTAL, PENELITIAN HIBAH TIM PASCASARJANA DAN PENELITIAN HIBAH PEKERTI PEKERTI 2010 LEMBAGA PENELITIANN DAN PENGABDIAN KEPADA MASYARAKAT UNIVERSITAS BRAWIJAYA 1

2 KATA PENGANTAR Buku panduan ini diterbitkan untuk memberikan informasi secara umum kepada para evaluator desentralisasi proposal penelitian Universitas Brawijaya Tahun Buku ini memuat tentang Pendahuluan, Tim Evaluator Proposal, Panitia Pelaksana, Tugas dan Tanggung Jawab LPPM, Tugas dan Tanggung Jawab Ketua Tim Evaluator, Kriteria Evaluator, Tugas Evaluator, Keragaman Penelitian, Komposisi Tim Proposal, Kriteria Seleksi Proposal, serta Tempat dan Jadwal Kegiatan. Kepada para evaluator kami berharap mengikuti panduan seleksi usul penelitian: Fundamental, Hibah Bersaing, Hibah Penelitian Tim Pascasarjana dan Hibah Pekerti Universitas Brawijaya Tahun Kepada panitia pelaksana dan tim evaluator serta semua pihak yang telah berpartisipasi dalam kegiatan ini, kami sampaikan terimakasih. Malang, Desember 2010 Ketua, Prof. Dr. Ir. Siti Chuzaemi, MS NIP i

3 DAFTAR ISI Kata Pengantar... i Daftar Isi... ii I. Pendahuluan... 1 II. Tim Evaluator Proposal... 4 III. Panitia Pelaksana... 5 IV. Tugas dan Tanggung Jawab LPPM... 6 V. Tugas dan Tanggung Jawab Ketua Tim Evaluator... 6 VI. Kriteria Evaluator... 6 VII. Tugas Evaluator... 7 VIII. Keragaman Penelitian... 7 IX. Tim Seleksi Proposal... 8 X. Kriteria Seleksi Proposal... 8 XI. Tempat dan Jadwal Kegiatan... 8 Lampiran... 9 ii

4 PANDUAN EVALUASI PROPOSAL PENELITIAN DESENTRALISASI: PENELITIAN HIBAH TIM PASCASARJANA, PENELITIAN HIBAH BERSAING, PENELITIAN FUNDAMENTAL, DAN PENELITIAN HIBAH PEKERTI UNIVERSITAS BRAWIJAYA TAHUN 2010 I. Pendahuluan Salah satu agenda kebijakan pendidikan tinggi adalah berkemampuan untuk mewujudkan suatu system pendidikan tinggi yang berkualitas tinggi, menjamin akses bagi peserta didik yang memenuhi persyaratan dan memiliki otonomi yang dapat menjamin terselenggaranya kegiatan akademik yang efisien dan berkualitas. Di samping itu, perguruan tinggi berkemampuan untuk menghasilkan SDM yang berkualitas tinggi dan mampu beradaptasi dengan perubahan Ipteks yang secara berkesinambungan melahirkan pengetahuan dan ilmu pengetahuan baru dengan selalu meningkatkan jumlah dan kualitas penelitian akses dan adaptasi terhadap ilmu pengetahuan dunia. Perguruan tinggi didorong untuk membangun kapasitas institusi yang antara lain meliputi peningkatan dan penjaminan mutu, menjamin kerjasama dengan stakeholder yang memungkinkan saling isi yang bermanfaat. Kekuatan internal ditingkatkan sehingga memungkinkan pengaturan sendiri pengelolaan institusi, staf, financial, penelitian. Dikti yang semula berperan sebagai regulator implementator menjadi regulator fasilitator. Di masa yang akan datang fungsi Dikti di bidang penelitian dan pengabdian kepada masyarakat sebagai motivator dan lembaga control kualitas. Otonomi dan desentralisasi mengharuskan pergeseran peran Ditjen Dikti dari penentu kebijakan nasional PT menjadi fasilitator, sosialisasi kebijakan, evaluasi dan koreksi serta menyiapkan infrastruktur legalitas, mengusahakan strukturisasi pendanaan, mendorong rencana pengembangan SDM, menjamin akses bagi peserta didik untuk melanjutkan pendidikan ke PT (beasiswa, bantuan voucher). Lebih lanjut Universitas Brawijaya dalam visinya: 1

5 Menjadi universitas unggul yang berstandar internasional dan mampu berperan aktif dalam pembangunan bangsa melalui proses pendidikan, penelitian dan pengabdian kepada masyarakat, sehingga dapat mewujudkan melalui misinya: 1. Membangkitkan kekuatan moral dan kesadaran tentang keberadaan penciptaan alam oleh Tuhan YME dan sadar bahwa setiap kehidupan mempunyai hak untuk dihargai. 2. Menyelenggarakan proses pendidikan agar peserta didik menjadi manusia yang berkemampuan akademik dan/ atau profesional yang berkualitas serta berkepribadian. 3. Melakukan pengembangan dan penyebarluasan ilmu pengetahuan, teknologi humaniora dan seni, serta mengupayakan penggunaannya untuk meningkatkan taraf kehidupan masyarakat dan memperkaya kebudayaan nasional. Lembaga Penelitian dan Pengabdian kepada Masyarakat (LPPM) Universitas Brawijaya berdasarkan Peraturan Pemerintah Nomor 60 Tahun 1999 dan Statuta Universitas Brawijaya (Kep. Mendiknas Nomor 080/O/2002) merupakan unsur pelaksana di Lingkungan Universitas Brawijaya yang bertugas untuk mengkoordinasi, memantau dan menilai pelaksanaan penelitian yang diselenggarakan oleh Pusat Penelitian dan dosendosen Universitas Brawijaya serta ikut mengendalikan administrasi sumberdaya yang diperlukan. Untuk menopang keberhasilan tugas yang diemban, LPPM Universitas Brawijaya merancang payung penelitian sebagai acuan utama apabila peneliti membuat proposal penelitian. 2

6 UUD 45 UU No.18/2002 SISNAS P3 IPTEK PP 20/2005 Alih Tekno Visi/ Misi UB 2025 JakStralit UB Thn RPJM Perpres No.7/ Bidang Fokus: -Pangan -Energi -Transportasi -ICT -Pertahanan -Kesehatan Prioritas Pembangunan Nasional & Jatim Tren Global Arah Prioritas Kerangka Kebijakan Payung Riset Unggulan (Smart Materials & Energy, Biomedical Eng. & Pelestarian Biodiversitas, Food Security & Medicine, Capacity Building Social Welfare) Payung Riset Unggulan Klaster Sains & Tek Klaster Life Sci Klaster Agro & Kesehatan Klaster Sos- Hum Smart Material & Energy Biomed. Eng & Pelest. Biodivers Food Security & Medicine Capacity Building & Soc. Welfare Proposal Riset Kolaborasi Proposal Riset Kolaborasi Proposal Riset Kolaborasi Proposal Riset Kolaborasi Co-funding maks Rp.200 juta/klaster Penguatan organisasi dan pengelolaan Lembaga Penelitian dan Pengabdian kepada Masyarakat juga terus akan dikembangkan terutama yang berkaitan dengan program penelitian unggulan (nasional maupun regional), kemitraan dengan pihak pengguna (Industri, Pemda dan masyarakat), peningkatan mutu dan jumlah publikasi serta aplikasi paten yang berujung pada komersialisasi hasil penelitian (transfer teknologi). Untuk tujuan terakhir, mulai tahun 2005 DP2M DIKTI memulai uji coba pelaksanaan penelitian yang di daerah (desentralisasi) untuk tujuh PT yang memenuhi persyaratan dari segi kesiapan pengelolaan internal Lembaga Penelitian dan Pengabdian kepada Masyarakat 3

7 (UGM, ITB, UNAIR, ITS, UNDIP, UNHAS dan UB), produktivitas penelitian yang telah berjalan, kualifikasi SDM peneliti (dosen) dan perkembangan strata system penyelenggaraan pendidikan. Sejalan dengan itu dan sesuai dengan wawasan competitiveness dalam memperoleh dana penelitian, DP2M DIKTI telah mengembangkan mekanisme dan kriteria seleksi bagi setiap usulan yang masuk dari Perguruan Tinggi desentralisasi. Untuk itu, proposal-proposal yang diajukan oleh dosen dari berbagai Perguruan Tinggi (baik desentralisasi maupun sentralisasi) perlu dilakukan penilaian atau evaluasi oleh kelompok pakar sesuai dengan keahliannya guna menentukan kelayakan menurut norma-norma akademik sehingga proposal penelitian tersebut layak untuk diterima dan didanai. Kelompok pakar atau tim evaluator yang ditugasi untuk melakukan penilaian terhadap proposal penelitian dituntut untuk memenuhi kriteria dan kemampuan akademik sehingga hasil yang diperoleh dapat dipertanggungjawabkan secara arif, bijaksana dan benar menurut kaidah akademik. Universitas Brawijaya sebagai salah satu PT yang ditunjuk melaksanakan desentralisasi pengelolaan penelitian perlu menyusun sebuah panduan kegiatan evaluasi proposal penelitian sebagai pedoman pelaksanaan bagi Tim Evaluator dalam menyeleksi proposal penelitian untuk tahun anggaran 2011 yang berisi antara lain: 1. Tim Evaluator 2. Panitia Pelaksana 3. Tugas dan Tanggungjawab LPPM 4. Tugas dan Tanggungjawab Ketua tim Evaluator 5. Kriteria Evaluator 6. Tugas Evaluator 7. Keragaman Penelitian 8. Komposisi Tim Seleksi Proposal 9. Kriteria Seleksi Proposal 10. Tempat dan Jadwal Kegiatan II. Tim Evaluator Proposal Berdasarkan keputusan dari Direktur DP2M DIKTI, mulai tahun anggaran 2005 Universitas Brawijaya diberi kepercayaan untuk melakukan evaluasi sendiri. 4

8 Tim evaluator usul penelitian fundamental, hibah bersaing, dan hibah penelitian tim pasca sarjana Universitas Brawijaya tahun 2010 berdasarkan bidang ilmu sebagai berikut: No. Bidang Ilmu Nama Evaluator I Nama Evaluator II 1. Teknik Prof. Ir. I.N.G. Wardana, M.Eng., Ph.D Prof. Ir. Sudjito, PhD 2. Pertanian Prof. Dr. Ir. Kuswanto, MS Prof. Dr. Sutiman B.S., MS 3. Peternakan dan Perikanan Prof. Dr. Ir. Luqman Hakim, MS Prof. Ir. Simon B.W., A.App.Sc 4. Sosial dan Ekonomi Prof. Ir. Antariksa, M.Eng., PhD Prof. Dr. Sutrisno, SE., AK. M.Si 5. MIPA Prof. Dr. Ir. Chandrawati Cahyani, MS Prof. Dr. Ir. Hari Poernomo, M.App.Sc 6. Kesehatan Prof. Ir. Drh. Aulanni am, DES Prof. Dr. dr. Noor Hamdani A.S., Sp.MK III. Panitia Pelaksana Susunan panitia pelaksana evaluasi usul penelitian: fundamental, hibah bersaing, dan hibah penelitian tim pasca sarjana Universitas Brawijaya tahun 2010 sebagai berikut: Penanggung Jawab : Ketua LPPM UB (Prof. Dr. Ir. Siti Chuzaemi, MS) Ketua Wakil Ketua Sekretaris Bendahara : Prof.Dr.dr. Noor Hamdani A.S., Sp.MK : Prof. Dr. Agus Suryono, MS : Dr. Multifiah, SE., MS : 1. Dra. Liliek Sulistyowati, MM. 2. Siti Kurniawati Sie Kesekretariatan : 1. Sudjari, S.Sos. (Koordinator) 2. Yuli Alfiana, Amd. 3. Hari Santoso Sie Persidangan : 1. Hadi Sucipto, SH. (Koordinator) 2. Era Agustina, ST. 3. Wasis Dwiono, SE. Sie Perlengkapan : 1. Sukarman, SH. (Koordinator) 2. Ardian Wahyu S., SE 3. Bambang Iswanto 4. Achmad Zaini Sie Dokumentasi : 1. Yudan Setiawan Sie Konsumsi : 1. Endang Dwi Wanito H. (Koordinator) 5

9 2. Poegoeh Susilowati 3. Slamet Hasan 4. Budi Setiawan Pembantu Umum : 1. Imam Prayitno, ST. (Koordinator) 2. Moch. Kholil 3. Agus Susanto 4. Candra Prawibisono IV. Tugas dan Tanggung Jawab LPPM 1. LPPM bertanggung jawab terhadap pelaksanaan seleksi proposal penelitian yang berasal dari Universitas Brawijaya. 2. LPPM bekerjasama dengan ketua Tim Evaluator membuat laporan pelaksanaan seleksi proposal penelitian dan ranking sesuai dengan hasil kesepakatan penilaian akhir yang didukung oleh Berita Acara Hasil Penilaian Usulan Proposal Penelitian Tahun Menyerahkan laporan hasil penilaian penelitian kepada DP2M DIKTI disertai dengan catatan-catatan koreksi penyempurnaan bagi proposal-proposal yang dinyatakan tidak memenuhi ranking dengan passing grade: fundamental 350, hibah bersaing 500, hibah pekerti 500, dan hibah penelitian tim pasca sarjana 550, tanpa nilai 3. V. Tugas dan Tanggung Jawab Ketua Tim Evaluator 1. Ketua Tim Evaluator bersama LPPM mengkoordinir pelaksanaan seleksi proposal penelitian desentralisasi. 2. Ketua Tim Evaluator bekerjasama dengan LPPM membuat laporan pelaksanaan seleksi proposal penelitian dan memberikan ranking sesuai dengan hasil kesepakatan penilaian akhir yang didukung oleh Berita Acara Hasil Penilaian Usulan Proposal Penelitian Tahun Ketua Tim Evaluator bertugas melakukan evaluasi secara menyeluruh terhadap pelaksanaan seleksi proposal penelitian desentralisasi. VI. Kriteria Evaluator 1. Evaluator proposal penelitian adalah para evaluator yang telah ditetapkan oleh Rektor Universitas Brawijaya. 6

10 2. Evaluator tidak sedang menjadi ketua atau anggota usul peneliti yang didanai oleh DP2M Dikti Depdiknas untuk tahun anggaran Mengingat tidak mungkin menyediakan evaluator yang sangat spesifik untuk setiap substansi proposal yang diajukan, evaluator harus menyandang gelar doktor (S3). 4. Komposisi tim evaluator untuk tahun 2010 adalah 100% ditetapkan oleh Universitas Brawijaya. 5. Evaluator seyogyanya menjaga kerahasiaan hasil evaluasi karena hasil evaluasi masih bersifat rekomendasi. 6. Untuk menjamin kerahasiaan, evaluator seyogyanya tidak memberitahukan kepada siapapun mengenai statusnya sebagai evaluator. 7. Evaluator sanggup hadir selama pelaksanaan cross check proposal sesuai dengan pembagian proposal yang telah diterima. 8. Untuk proposal yang akan ditolak, evaluator harus menulis komentar secara naratif singkat dengan tujuan membina kemampuan peneliti dalam menyusun proposal. Komentar seyogyanya tidak menjatuhkan semangat pengusul. VII. Tugas Evaluator 1. Satu proposal penelitian dievaluasi oleh 2 (dua) orang pakar. 2. Tim evaluator diberi waktu 7 (tujuh) hari efektif untuk menelaah proposal yang telah ditugaskan sesuai dengan kepakaran dibidangnya. 3. Tim evaluator bertugas melakukan seleksi terhadap usulan proposal penelitian secara independen sesuai criteria seleksi yang tertuang dalam Buku Panduan Pengelolaan Program Hibah DP2M Dikti Edisi VII Tahun Tim evaluator melakukan Cross Check dengan pasangannya. Mengingat Cross Check merupakan hal yang sangat penting didalam menentukan keberhasilan/ kegagalan suatu proposal, para evaluator diharapka hadir pada pertemuan Cross Check tersebut. VIII. Keragaman Penelitian Program penelitian diusulkan untuk didanai DP2M Dikti Depdiknas untuk tahun anggaran 2011 dari Universitas Brawijaya sebanyak = 68 judul terdiri dari: 7

11 No. Bidang Ilmu Jenis dan Jumlah Penelitian JUMLAH 1. Teknik Hibah Bersaing = Fundamental = 3 Hibah Pekerti = 1 Hibah Pascasarjana = 1 2. Pertanian Hibah Bersaing = Hibah Pascasarjana = 2 3. Peternakan dan Perikanan Hibah Bersaing = 2 3 Fundamental = 1 4. Sosial dan Ekonomi Hibah Bersaing = 4 7 Fundamental = 2 Hibah Pascasarjana = 1 5. MIPA Hibah Bersaing = Fundamental = 4 6. Kesehatan Hibah Bersaing = 4 Fundamental = 1 Hibah Pascasarjana = 2 7 JUMLAH 68 IX. Tim Seleksi Proposal Jumlah tim seleksi tergantung pada jumlah proposal yang akan dievaluasi dengan prinsip 1 proposal dievaluasi oleh 2 evaluator ditentukan dengan SK Rektor UB. X. Kriteria Seleksi Proposal 1. Dijamin tidak ada duplikasi penelitian pada tahun berjalan dan/ atau tahun sebelumnya. 2. Dijamin proses seleksi dilakukan secara transparan dan akuntabel dalam penetapan pemenang. 3. Jika terdapat duplikasi judul seperti yang dimaksud pada butir 1 tetapi antar fakultas, maka akan dipilih salah satu atau dimungkinkan adanya penggabungan yang akan diputuskan bersama antara LPPM dan Tim Evaluator. 4. Segala bentuk penyimpangan dari ketentuan yang berlaku akan dilakukan sanksi sesuai ketentuan DP2M DIKTI. XI. Tempat dan Jadwal Kegiatan 1. Pelaksanaan evaluasi proposal penelitian di Lembaga Penelitian dan Pengabdian Kepada Masyarakat (LPPM, Jalan Veteran Malang, Telephon (0341) Tim evaluator diberi waktu 3 (tiga) hari efektif untuk menelaah proposal yang ditugaskan sesuai dengan kepakaran di bidangnya. 3. Tim evaluator melakukan cross check dengan pasangannya pada awal tahun 2011 di LPPM UB. 8

12 FORMULIR EVALUASI USUL PENELITIAN HIBAH PASCASARJANA TAHUN 2010 Perguruan Tinggi : UNIVERSITAS BRAWIJAYA Judul Penelitian : Ketua Peneliti/NIP :... Anggota Peneliti : Waktu Penelitian Biaya Penelitian : Tahun : Usulan: Rp... Rekomendasi: Rp. K R I T E R I A P E N I L A I A N : No KRITERIA BOBOT (%) Keutuhan dan keterpaduan program penelitian: road map, sistematika penelitian, lintas disiplin 25 Integrasi penelitian dengan pendidikan pascasarjana: (1) jumlah mhs pascasarjana yang dilibatkan; (2) Keterlibatan tim peneliti 20 dalam bimbingan mahasiswa Mutu penelitian: (1) Kemutakhiran; (2) Inovasi; (3) Metode penelitian 40 Kelayakan: (1) Biaya; (2) Sumber daya peralatan; (3) Sumber daya peneliti 15 TOTAL NILAI 100 SKOR NILAI Masing-masing kriteria diberi Skor : 1, 2, 3, 5, 6, 7 *) Hasil Penilaian (coret yg tidak perlu) : Diterima/Ditolak **) Alasan Penolakan :..... ***) Saran Perbaikan :... ****) Malang, 2010 Penilai, *) **) ***) ****) (.) 1 = Buruk; 2 = Sangat Kurang; 3= Kurang; 5= Cukup; 6 = Baik; 7= Sangat baik Batas Penerimaan (Passing Grade) = 550 tanpa nilai 3 Berikan komentar tertulis pada lembar terpisah, baik yang direkomendasikan, dan terutama yang tidak direkomendasikan Bagi yang direkomendasikan untuk diterima 9

13 FORMULIR EVALUASI USUL PENELITIAN HIBAH BERSAING TAHUN 2010 Perguruan Tinggi : UNIVERSITAS BRAWIJAYA Judul Penelitian : Ketua Peneliti/NIP : Anggota Peneliti : Waktu Penelitian Biaya Penelitian : Tahun : Usulan: Rp... Rekomendasi: Rp. K R I T E R I A P E N I L A I A N : No KRITERIA INDIKATOR PENILAIAN BOBOT SKOR NILAI 1 Perumusan Masalah Ketajaman Perumusan Masalah Tujuan Penelitian 15 2 Luaran (Proses& Produk): Pengembangan IPTEKS Menunjang pembangunan Pentingnya penelitian yang direncanakan 35 Pengembangan institusi 3 Tinjaun Pustaka Studi pustaka / kemajuan yang telah dicapai dan studi pendahuluan 15 4 Metode penelitian Desain metode penelitian 20 5 Kelayakan: Uraian umum Jadwal Biodata Personalia Rincian anggaran Biaya Dukungan dan sarana penunjang Sarana dan prasarana penunjang 15 TOTAL NILAI 100 Masing-masing kriteria diberi Skor : 1, 2, 3, 5, 6, 7 *) Rekomendasi (coret yg tidak perlu) : Diterima/Ditolak Alasan Penolakan : a, b, c, d, e. (sebutkan....) **) Saran perbaikan :. Malang, 2010 Penilai, (.) *) 1 = Buruk; 3 = Kurang; 6 = Baik; 2 = Sangat kurang; 5 = Cukup; 7 = Sangat Baik; Batas Penerimaan (Passing Grade) = 500 tanpa skor 1. **) L i h a t b u t i r - b u t i r a l a s a n p e n o l a k a n U s u l P e n e l i t i a n H i b a h B e r s a i n g 10

14 FORMULIR EVALUASI USUL PENELITIAN FUNDAMENTAL TAHUN 2010 Perguruan Tinggi : UNIVERSITAS BRAWIJAYA Judul Penelitian : Ketua Peneliti/NIP : Anggota Peneliti : Waktu Penelitian Biaya Penelitian K R I T E R I A P E N I L A I A N : : Tahun : Usulan: Rp... Rekomendasi: Rp. No KRITERIA INDIKATOR PENILAIAN BOBOT (%) 1 Masalah yang diteliti Konstribusi pada IPTEKS Tinjauan Pustaka 15 Perumusan masalah 2 Orientasi Penelitian Makna ilmiah Orsinilitas 30 Kemutakhiran 3 Metode Penelitian Pola pendekatan ilmiah 15 Kesesuaian metode 4 Luaran penelitian Teori/hipotesis baru Metode baru 30 Informasi desain baru Peneliti 5 Kelayakan sumber Daya Peralatan 10 Rencana jadwal kerja Rencana biaya Total Nilai 100 SKOR NILAI Masing-masing kriteria diberi Skor : 1, 2, 4, 5 *) Hasil Penilaian (coret yg tidak perlu) : Diterima/Ditolak Alasan Penolakan : a, b, c, d, e, f, g, h, i, j, k, l,m (sebutkan.) **) Saran perbaikan :... Malang, 2010 Penilai, *) 1 = Sangat Kurang; 4 = Baik; 2 = Kurang; 5 = Sangat Baik; Batas Penerimaan (Passing Grade) = 350 **) L i h a t b u t i r - b u t i r a l a s a n p e n o l a k a n U s u l P e n e l i t i a n F u n d a m e n t a l (.) 11

15 FORMULIR EVALUASI USUL PENELITIAN HIBAH PEKERTI TAHUN 2010 Perguruan Tinggi : UNIVERSITAS BRAWIJAYA Judul Penelitian : Ketua Peneliti/NIP : Anggota Peneliti : Waktu Penelitian Biaya Penelitian : Tahun : Usulan: Rp... Rekomendasi: Rp. K R I T E R I A P E N I L A I A N : No KRITERIA BOBOT (%) 1 Kesesuaian keahlian Pengusul dengan program 15 2 Pentingnya kerjasama penelitian 20 3 Track Record TPM Kesesuaian Keahlian 25 Prestasi Penelitian dan Publikasi, HKI 4 Mutu Penelitian 20 5 Kelayakan Penelitian Keberlanjutan penelitian di TPP Biaya 20 Perencanaan / alokasi waktu kerjasama TOTAL NILAI 100 SKOR NILAI Masing-masing kriteria diberi Skor : 1, 2, 3, 5, 6, 7 *) Rekomendasi : Diterima/Ditolak Apabila nilai 500 dapat direkomendasikan untuk didanai Alasan Penolakan : Saran perbaikan : Malang, 2010 Penilai, (.) *) 1 = Buruk; 2 = Sangat Kurang; 3= Kurang; 5= Cukup; 6 = Baik; 7= Sangat Baik 12