PENGEMBANGAN SISTEM TEMU KEMBALI INFORMASI ARTIKEL JURNAL DIGITAL DI PDII LIPI SJAEFUL AFANDI

Transkripsi

1 PENGEMBANGAN SISTEM TEMU KEMBALI INFORMASI ARTIKEL JURNAL DIGITAL DI PDII LIPI SJAEFUL AFANDI SEKOLAH PASCASARJANA INSTITUT PERTANIAN BOGOR BOGOR 2014

2

3 PERNYATAAN MENGENAI TUGAS AKHIR DAN SUMBER INFORMASI SERTA PELIMPAHAN HAK CIPTA Dengan ini saya menyatakan bahwa tugas akhir berjudul Pengembangan Sistem Temu Kembali Informasi Artikel Jurnal Digital di PDII LIPI adalah benar karya saya dengan arahan dari komisi pembimbing dan belum diajukan dalam bentuk apa pun kepada perguruan tinggi mana pun. Sumber informasi yang berasal atau dikutip dari karya yang diterbitkan maupun tidak diterbitkan dari penulis lain telah disebutkan dalam teks dan dicantumkan dalam Daftar Pustaka di bagian akhir tugas akhir ini. Dengan ini saya melimpahkan hak cipta dari karya tulis saya kepada Institut Pertanian Bogor. Bogor, Agustus 2014 Sjaeful Afandi NIM G

4 RINGKASAN SJAEFUL AFANDI. Pengembangan Sistem Temu Kembali Informasi Artikel Jurnal Digital di PDII LIPI. Dibimbing oleh FIRMAN ARDIANSYAH dan BLASIUS SUDARSONO Salah satu tugas PDII LIPI adalah menyebarkan hasil penelitian yang ada di Indonesia, di mana hasil penelitian tersebut tidak hanya buku, tetapi juga berupa artikel jurnal. Saat ini sistem temu kembali pada artikel jurnal masih menggunakan sistem pencarian tradisional tanpa menghiraukan relevansi data hasil pencarian. Urutan hasil pencarian hanya didasarkan pada urutan pemasukan data sehingga perlu dikembangkan sistem temu kembali informasi digital artikel jurnal sebagai alternatif pencarian data. Pengembangan sistem temu kembali informasi ini, menggunakan perangkat lunak Sphinx Search. Data yang digunakan adalah hasil dari konversi berkas PDF ke dalam bentuk XML sebanyak seribu berkas. Kemudian dilakukan proses tokenisasi dan pengindeksan menggunakan peranti lunak Sphinx Search. Sistem temu kembali diujicoba dengan kueri yang telah ditentukan. Hasil temu kembali dihitung dengan menggunakan sebelas standard recalls agar diketahui relevansi dan keakuratannya. Sistem temu kembali menghasilkan data hasil pencarian yang relevan dan akurat dengan nilai average presicion (AVP) sebesar 79%. Kata kunci: artikel digital, sistem temu kembali, PDII-LIPI

5 SUMMARY SJAEFUL AFANDI. The Development of Information Retrieval System for Digital Journal Articles in PDII - LIPI Supervised by FIRMAN ARDIANSYAH and BLASIUS SUDARSONO. One of the main tasks of PDII - LIPI is disseminating the research publications in Indonesia. The research publications are not only books but also journal articles. Currently the PDII-LIPI retrieval system of journal articles still use the traditional method, regardless the relevance of the search results. The search result sequence showed by the order of data entry. Therefore, it is necessary to develop an information retrieval system as an alternative. The development of this information retrieval system used Sphinx Search software. This research used 1000 PDF files converted into XML files. The XML files then processed by tokenization and indexing using the default command of Sphinx Search. The retrieval system tested with predetermined queries. The retrieval results calculated by the 11 standard recalls in order to know their relevance and accuracy. This retrieval system produced relevant and accurate data search with average value precision by 79%. Keywords: digital article, retrieval system, PDII-LIPI

6 Hak Cipta Milik IPB, Tahun 2014 Hak Cipta Dilindungi Undang-Undang Dilarang mengutip sebagian atau seluruh karya tulis ini tanpa mencantumkan atau menyebutkan sumbernya. Pengutipan hanya untuk kepentingan pendidikan, penelitian, penulisan karya ilmiah, penyusunan laporan, penulisan kritik, atau tinjauan suatu masalah; dan pengutipan tersebut tidak merugikan kepentingan IPB Dilarang mengumumkan dan memperbanyak sebagian atau seluruh karya tulis ini dalam bentuk apa pun tanpa izin IPB

7 PENGEMBANGAN SISTEM TEMU KEMBALI INFORMASI ARTIKEL JURNAL DIGITAL DI PDII LIPI SJAEFUL AFANDI Tugas Akhir sebagai salah satu syarat untuk memperoleh gelar Magister Profesional pada Program Studi Teknologi Informasi untuk Perpustakaan SEKOLAH PASCASARJANA INSTITUT PERTANIAN BOGOR BOGOR 2014

8 Penguji Luar Komisi pada Ujian Tugas Akhir : Endang Purnama Giri, SKom, MKom

9 Judul Tesis : Pengembangan Sistem Temu Kembali Informasi Artikel Jurnal Digital di PDII LIPI Nama : Sjaeful Afandi NIM : G Disetujui oleh Komisi Pembimbing Firman Ardiansyah, SKom, MSi Ketua Blasius Sudarsono, MLS Anggota Diketahui oleh Ketua Program Studi Teknologi Informasi untuk Perpustakaan Dekan Sekolah Pascasarjana Aziz Kustiyo, SSi, MKom Dr Ir Dahrul Syah, MScAgr Tanggal Ujian: 30 Agustus 2014 Tanggal Lulus:

10 PRAKATA Puji dan syukur penulis panjatkan kepada Allah subhanahu wa ta ala atas segala karunia-nya sehingga karya ilmiah ini berhasil diselesaikan. Tema yang dipilih dalam penelitian ini ialah sistem temu kembali, dengan judul Pengembangan Sistem Temu Kembali Informasi Artikel Jurnal Digital di PDII - LIPI. Terima kasih penulis ucapkan kepada Bapak Firman Ardiansyah SKom, MSi dan Blasius Sodarsono, MLS selaku pembimbing yang telah banyak memberi saran. Di samping itu, penghargaan penulis sampaikan kepada RISTEK selaku pemberi beasiswa sehingga penulis bisa melaksanakan tugas belajar pada Program Studi Magister Teknologi Informasi untuk Perpustakaan. Penulis juga mengucapkan banyak terima kasih kepada ibu dan bapak, istri, anak-anak, adik, saudara dan teman-teman MTP angkatan 2010 semua yang telah memberikan dukungan penuh selama menyelesaikan penelitian hingga menyusun tulisan ini. Semoga karya ilmiah ini bermanfaat. Bogor, Agustus 2014 Sjaeful Afandi

11 DAFTAR ISI DAFTAR TABEL DAFTAR GAMBAR DAFTAR LAMPIRAN PENDAHULUAN 1 Latar Belakang 1 Tujuan Penelitian 1 Manfaat Penelitian 1 Ruang Lingkup Penelitian 2 METODE 2 Desain Penelitian 2 Tahapan Penelitian 2 Lokasi dan Waktu Penelitian 5 HASIL DAN PEMBAHASAN 6 Koleksi Dokumen Pengujian 6 Pengujian Sistem Temu Kembali 9 Evaluasi 9 SIMPULAN 12 DAFTAR PUSTAKA 13 RIWAYAT HIDUP 36 vi vi vi

12 DAFTAR TABEL 1 Jumlah artikel pada sepuluh besar bidang jurnal 3 2 Kueri yang digunakan untuk pengumpulan data 4 DAFTAR GAMBAR 1 Tahapan penelitian 2 2 Hasil konversi PDF ke XML yang mengalami kerusakan teks 6 3 Hasil konversi PDF ke XML berisi judul, abstrak dan keyword 7 4 Hasil akhir konversi PDF ke XML 7 5 Hasil indexing dokumen 9 6 Relasi antara relevant dan retrieved dokumen 10 7 Hasil perhitungan precision dan recall 11 8 Hasil perhitungan average precision dari lima pengujian sistem 11 9 Trade-off antara precision dan recall (Zhang 2008) 12 DAFTAR LAMPIRAN 1 Daftar istilah kueri dan dokumen yang relevan 14 2 Contoh koleksi dokumen 20 3 Hasil pencarian dokumen fungsional peneliti pertama 21 4 Hasil pencarian dokumen fungsional peneliti kedua 22 5 Hasil pencarian dokumen fungsional pustakawan pertama 23 6 Hasil pencarian dokumen fungsional pustakawan kedua 24 7 Hasil pencarian dokumen fungsional umum 25 8 Hasil perhitungan recall dan precision pada fungsional peneliti pertama 26 9 Hasil perhitungan recall dan precision pada fungsional peneliti kedua Hasil perhitungan recall dan precision pada fungsional pustakawan pertama Hasil perhitungan recall dan precision pada fungsional pustakawan kedua Hasil perhitungan recall dan precision pada fungsional umum 34

13 PENDAHULUAN Latar Belakang Perkembangan ilmu pengetahuan dan teknologi informasi dewasa ini membuat perubahan perilaku dalam pencarian informasi sehingga berdampak bagi lembaga-lembaga yang bergerak dalam bidang jasa penyedia informasi seperti perpustakaan. Perpustakaan harus mampu berperan sebagai penyedia sumber daya informasi dan pengetahuan yang utama, serta ketersediaan mekanisme akses dan temu kembali sumberdaya informasi dan pengetahuan yang efisien. Untuk mendukung peranan tersebut, perpustakaan melakukan perubahan pemeliharaan dan katalogisasi dari yang sebelumnya berupa objek fisik seperti buku, jurnal dan lain sebagainya ke dalam bentuk digital berupa teks, gambar dan audio serta ketersediaan pengaksesan katalog secara online. Hasil perubahan tersebut dapat dilihat dengan munculnya perpustakaan digital yang menyediakan akses instan terhadap koleksi dokumen yang dimiliki seperti pencarian pada metadata keyword, penulis, judul dan lain sebagainya. Pusat Dokumentasi dan Informasi Ilmiah Lembaga Ilmu Pengetahuan Indonesia (PDII LIPI) yang bertugas sebagai pusat penyebaran hasil penelitian yang ada di Indonesia, telah memiliki koleksi artikel jurnal yang cukup banyak (sampai dengan tahun 2014 terdapat sekitar record data dan sekitar fulltext digital yang telah diunggah ke web Indonesian Scientific Database Journal). Hal tersebut tentunya memerlukan sistem temu kembali informasi yang cepat, tepat dan efektif. Sistem temu kembali yang ada saat ini hanya mendasarkan pencarian pada judul, pengarang, tahun, subjek, tipe koleksi, dan bidang koleksi. Hasil pencarian informasi diurutkan berdasarkan urutan pemasukan data sehingga data yang lebih dahulu dimasukkan akan keluar sebagai urutan pertama. Pencarian temu kembali informasi dilakukan pada basis data relasional tanpa ada pembobotan relevansi dengan kata kunci. Penelitian ini dilakukan untuk memberikan alternatif sistem temu kembali informasi di PDII LIPI. Pencarian informasi yang telah ada dapat dikembangkan ke dalam pencarian fulltext digital agar relevansi data hasil pencarian bisa lebih akurat. Tujuan Penelitian Tujuan penelitian ini adalah: a. Mengembangkan dan menganalisis kinerja Sistem Temu Kembali artikel digital jurnal di PDII LIPI. b. Menganalisa relevansi hasil pencarian dari sistem temu kembali pada artikel digital jurnal. Manfaat Penelitian Manfaat penelitian ini adalah: a. Sebagai alternatif sistem temu kembali informasi di PDII LIPI, selain temu kembali informasi menggunakan metadata. b. Mengetahui relevansi hasil pencarian artikel digital yang ada di PDII - LIPI.

14 2 Ruang Lingkup Penelitian Penelitian ini membahas sistem temu kembali dengan ruang lingkup: a. Data yang digunakan diambil dari data koleksi artikel jurnal PDII LIPI, antara tahun 2003 sampai dengan tahun 2010 dan dibatasi hanya seribu data saja. b. Bidang artikel yang digunakan meliputi Manajemen, Pendidikan, Kesehatan, Ekonomi, Hukum didasarkan pada jumlah data artikel yang terbanyak. c. Dokumen yang digunakan untuk penelitian ini dalam format PDF, dan dikonversi ke dalam bentuk XML. METODE Desain Penelitian Desain penelitian yang digunakan dalam penelitian ini adalah studi kasus (case study), yaitu penelitian yang memusatkan perhatian pada suatu kasus tertentu dengan menggunakan individu atau kelompok sebagai bahan studinya. Penelitian ini bersifat deskriptif dan eksploratif, difokuskan untuk menggali dan mengumpulkan data yang lebih dalam terhadap obyek yang diteliti untuk dapat menjawab permasalahan yang sedang terjadi (Hasibuan 2007). Tahapan Penelitian Sistem temu kembali informasi menerima kueri dari pengguna, kemudian melakukan perangkingan terhadap dokumen pada koleksi berdasarkan kesesuaiannya dengan kueri. Hasil perangkingan merupakan dokumen yang menurut sistem relevan dengan kueri (Mandala dan Setiawan 2002). Penelitian ini dilaksanakan dalam beberapa tahapan yang diilustrasikan pada Gambar 1. Data yang diproses dalam sistem ini adalah koleksi dokumen artikel jurnal dan kueri yang telah disiapkan sebelumnya. Gambar 1 Tahapan penelitian

15 3 Pengumpulan Dokumen Metadata koleksi artikel jurnal yang digunakan antara tahun 2003 sampai 2010, dengan jumlah data record. Data tersebut diurut berdasarkan bidang artikel jurnal yang paling banyak memiliki fulltext digital. Dihasilkan lima bidang artikel jurnal dengan urutan terbesar yaitu manajemen, pendidikan, ekonomi, kesehatan, dan hukum (Tabel 1). Artikel jurnal yang digunakan sebanyak seribu dengan pembagian masing-masing bidang sebanyak dua ratus dokumen. Tabel 1 Jumlah artikel pada sepuluh besar bidang jurnal No Bidang Jumlah 1 Manajemen Pendidikan Ekonomi Kesehatan Hukum Rekayasa Pertanian Biologi Lingkungan Kimia 1202 Proses pengumpulan artikel jurnal digital dilakukan dengan menggunakan kueri pada subjek metadata di basis data (Tabel 2). Total kueri yang digunakan dalam pengambilan data sebanyak tiga puluh kueri yang terdiri dari: satu kueri untuk dua kata subjek, dua kueri untuk satu kata subjek yang sama antara dua bidang atau lebih, tiga kueri untuk satu kata subjek. Kueri yang digunakan diambil secara acak dan tiap bidang harus diperoleh sebanyak dua ratus record. Kata yang didapat dari kueri tersebut, digunakan untuk pengujian sistem temu kembali yang dikembangkan. Jumlah dokumen hasil kueri dapat dilihat di Tabel 2. Pada proses pembuatan corpus, penentuan artikel jurnal digital yang relevan, ditentukan oleh peneliti. Artikel jurnal digital yang relevan dengan kueri ditandai dengan nomor identitas untuk membantu proses pengolahan data (Lampiran 1). Praproses Tahapan ini menjalankan praproses pengujian sistem yang terdiri dari : a. Text Operations (operasi terhadap teks) yang meliputi pemilihan kata-kata dalam kueri maupun dokumen (term selection) dalam pentransformasian dokumen menjadi indeks dari kata-kata yang ada. Tahap ini meliputi proses lowercasing, tokenisasi, dan pembuangan stopwords. Lowercasing adalah proses untuk mengubah semua huruf menjadi huruf non-capital agar menjadi case-insensitive pada saat dilakukan pemrosesan teks dokumen.

16 4 Tabel 2 Kueri yang digunakan untuk pengumpulan data Bidang Kueri Jumlah DokumenRelevan ekonomi economic development 34 economic 46 agroindustry 32 bankruptcy 25 transportation 33 tax 30 hukum legal aspects 51 crimes 19 contract 48 agricultural 17 government 54 human 11 kesehatan avian influenza 35 dental 33 nutritional 27 age 58 malpractice 17 medical 30 pendidikan teaching material 40 achievement 35 accounting 28 accountants 25 activity 39 education 33 manajemen accounting information 23 marketing 60 bureaucracy 21 entrepreneurs 16 strategic 11 auditing 69 Tokenisasi adalah suatu tahap pemrosesan input teks yang dibagi menjadi unit-unit kecil yang disebut token atau term, yang dapat berupa suatu kata atau angka. Proses tokenisasi dilakukan sesuai dengan aturan berikut : Whitespace, berarti karakter ini merupakan karakter pemisah token. Alpha, berarti karakter ini merupakan huruf. Numeric, berarti karakter ini merupakan angka. Other, berarti karakter ini tidak temasuk whitespace, alpha, dan numeri. Token yang terdiri atas karakter numerik saja tidak diikutsertakan. Stopwords merupakan daftar kata-kata yang dianggap tidak memiliki makna. Kata yang tercantum dalam daftar ini dibuang dan tidak ikut diproses pada tahap selanjutnya.

17 5 b. Indexing (pengindeksan) dilakukan untuk membangun indeks dari koleksi dokumen dalam bentuk XML. c. Query formulation (formulasi kueri) yaitu memberi bobot pada indeks kata-kata kueri. d. Ranking (perangkingan), dilakukan dengan memberikan nilai pada dokumen-dokumen yang relevan terhadap kueri dan mengurutkannya berdasarkan relevansi dengan kueri. Evaluasi Evaluasi hasil pencarian dilakukan untuk menghitung seberapa baik hasil pencarian yang telah dilakukan dengan menggunakan metode sebelas standard recalls. Lingkup Pengembangan Penelitian ini dilakukan dengan menggunakan perangkat keras (hardware) sebagai berikut : a. (1) Intel Xeon Processor E5606 (2.13 GHz, 8MB L3 Cache, 80 Watts, DDR3-800 b. 4 GB (2 x 2 GB) PC R (DDR3-1333) Registered DIMMs c. Harddisk 500 GB. d. Monitor dengan resolusi 1024 x 768 pixel. e. Keyboard dan Mouse. Alat bantu perangkat lunak (software) yang digunakan sebagai berikut : a. Sistem opeasi Linux. b. PHP versi 5.3. c. Web Browser Mozilla Firefox 18.0 d. Notepad++ v6.3, digunakan sebagai editor website. e. XAMPP digunakan sebagai paket web server. f. Adobe Acrobat 9 Pro Extended. Lokasi dan Waktu Penelitian Penelitian dilaksanakan di perpustakaan Pusat Dokumentasi dan Informasi Ilmiah PDII-LIPI. Penelitian dilaksanakan dimulai pada bulan September 2012 sampai dengan Juli 2014.

18 6 HASIL DAN PEMBAHASAN Koleksi Dokumen Pengujian Koleksi dokumen yang digunakan untuk menguji sistem berasal dari koleksi file digital artikel jurnal PDII-LIPI yang berbentuk Portable Digital Format (PDF). Format ini diubah ke struktur tag XML dengan field yang digunakan dalam dokumen terdiri dari : <doc></doc> mewakili keseluruhan isi dokumen. Di dalamnya terdapat tag lain yang mendeskripsikan isi dokumen secara lebih jelas. <docno></docno>mewakili ID dokumen. ID dokumen yang digunakan merupakan ID dari artikel jurnal yang ada di dalam basis data. <title></title> mewakili judul dokumen. <keyword></keyword> mewakili kata kunci dokumen. <abstract></abstract>mewakili abstrak dari dokumen. Konversi file PDF ke XML untuk seribu file dilakukan secara manual dengan menggunakan perangkat lunak Adobe Acrobat Pro Extended 9. Hal ini dilakukan karena hasil OCR dengan menggunakan script PHP tidak memberikan hasil teks yang baik dan mengalami kerusakan seperti terlihat pada Gambar 2. Gambar 2 Hasil konversi PDF ke XML yang mengalami kerusakan teks Dengan mempertimbangkan masalah pada hasil konversi, maka data yang diambil dari sebuah dokumen dibatasi pada judul, keyword, dan abstrak sebagai sumber informasi (Gambar 3). Format hasil akhir XML yang diperoleh ditunjukkan pada Gambar 4 dan Lampiran 2.

19 7 Gambar 3 Hasil konversi PDF ke XML berisi judul, abstrak dan keyword Gambar 4 Hasil akhir konversi PDF ke XML Praproses Tahapan praproses dalam temu kembali merupakan tahapan pembangunan indeks dari koleksi dokumen yang akan digunakan. Kualitas indeks mempengaruhi efektivitas dan efisiensi sistem temu kembali informasi (Chu et al. 2002). Indeks dokumen adalah himpunan term yang menunjukkan isi atau topik yang dikandung oleh dokumen. Ukuran indeks yang kecil dapat memberikan hasil buruk dan mungkin beberapa item yang relevan terabaikan. Indeks yang besar memungkinkan ditemukan banyak dokumen yang relevan tetapi sekaligus dapat menaikkan jumlah dokumen yang tidak relevan dan menurunkan kecepatan pencarian (searching) (Hyusein dan Patel 2003).

20 8 Tahapan proses text operation, indexing, query formulation dan ranking dilakukan oleh Sphinx Search. Pada tahap awal dilakukan proses konfigurasi dokumen sebagai berikut: index test2 { source = srcxml path = c:/sphinx/data/test2 docinfo = extern min_word_len = 3 charset_type = utf-8 enable_star = 0 html_strip = 0 stopwords = c:/sphinx/data/stopwords.txt } Penjelasan untuk konfigurasi tersebut adalah sebagai berikut: source = srcxml, konfigurasi untuk menandakan bahwa sumber yang digunakan atau file yang akan diindeks berupa file dengan format XML. path=c:/dtf/data/test2, konfigurasi untuk mengatur lokasi file hasil indexing disimpan. docinfo = extern, konfigurasi untuk penyimpanan dokumen hasil indexing. Dalam hal ini, nilai extern menunjukkan bahwa hasil indexing akan disimpan dalam file terpisah dengan nama file yang sama. min_word_len = 3, konfigurasi ini menjelaskan panjang minimal kata yang diindeks, yaitu minimal 3 karakter. charset_type = utf-8, konfigurasi ini menunjukkan tipe karakter yang digunakan, yaitu utf-8. enable_star = 0, konfigurasi untuk pengindeksan prefiks. Digunakan nilai 0 yang menunjukkan bahwa tidak dilakukan pengindeksan untuk prefiks. html_strip = 0, konfigurasi untuk menghilangkan tag. Digunakan nilai 0 yang berarti tidak menghilangkan tag. stopwords=c:/sphinx/data/stopwords.txt, merupakan konfigurasi untuk eliminasi kata buangan. Hasil indexing terlihat pada Gambar 5, besar file hasil indeks adalah 1.2 MB untuk seribu dokumen yang akan digunakan di sistem. Waktu yang dibutuhkan untuk indexing adalah detik. Pembobotan dokumen hasil temu kembali informasi menggunakan ukuran kesamaan BM25 yeng merupakan fungsi default Spinx Search (SPH_RANK_PROXIMITY_BM25). Urutan dokumen yang ditampilkan sesuai dengan kemiripan antara suatu dokumen dengan kueri yang diberikan menggunakan SPH_SORT_RELEVANCE.

21 9 Gambar 5 Hasil indexing dokumen Pengujian Sistem Temu Kembali Proses selanjutnya yaitu proses pengujian sistem temu kembali dokumen. Pengujian sistem dilakukan oleh lima orang yang terdiri dari : a. dua orang fungsional peneliti b. dua orang fungsional pustakawan c. satu orang fungsional umum. Alasan pemilihan fungsional peneliti, pustakawan, dan umum adalah agar didapat keragaman hasil temu kembali sehingga dapat diketahui perbedaan persepsi hasil pencarian dan diketahui betul atau salahnya hasil pencarian. Fungsional peneliti dipilih karena pengunjung perpustakaan PDII-LIPI didominasi oleh peneliti, baik yang datang langsung maupun yang melakukan akses dari katalog online. Fungsional pustakawan dibutuhkan dalam pengecekan bibliografi koleksi perpustakaan. Fungsional umum dipilih karena posisi ini relatif tidak memperdulikan teknik penelusuran informasi namun hanya berfokus pada hasil pencarian sesuai dengan yang dikendaki. Detail hasil penelusuran untuk masingmasing fungsional dapat dilihat pada Lampiran 3 hingga Lampiran 7. Evaluasi Sistem temu kembali mengembalikan satu set dokumen sebagai jawaban atas kueri pengguna. Terdapat dua kategori dokumen yang dihasilkan oleh sistem temu kembali terkait pemrosesan kueri, yaitu relevant document (dokumen yang relevan dengan kueri) dan retrieved document (dokumen yang diterima pengguna). Gambar 6 menunjukkan hubungan antara kedua kategori ini digambarkan menggunakan diagram Venn (Cios et al. 2007) :

22 10 Gambar 6 Relasi antara relevant dan retrieved dokumen Ukuran umum yang digunakan untuk mengukur kualitas dari text retrieval adalah kombinasi precision dan recall. Precision mengevaluasi kemampuan sistem temu kembali untuk menemukan kembali top-ranked yang paling relevan, dan didefinisikan sebagai presentase dokumen yang ditemukembalikan relevan terhadap kueri pengguna. Recall mengevaluasi kemampuan sistem temu kembali untuk menemukan semua item yang relevan dari dalam koleksi dokumen dan didefinisikan sebagai presentase dokumen yang relevan terhadap kueri pengguna dan yang ditemukembalikan. Pada tahap evaluasi dilakukan penilaian tingkat keefektifan proses temu kembali terhadap sejumlah koleksi pengujian dengan menghitung nilai recall dan precision dari proses temu kembali dokumen berdasarkan penilaian relevansinya. Nilai recall yang digunakan adalah 11 standard recalls (0,0.1,0.2,...,1). Nilai ini menunjukkan jumlah bagian dokumen dari seluruh dokumen terambil untuk perhitungan nilai precision. Misalkan untuk nilai recall 0.1 berarti jumlah dokumen yang digunakan untuk perhitungan nilai precision adalah 10% dari seluruh dokumen relevan yang ada. Nilai precision untuk nilai recall 0.1 adalah perbandingan banyaknya dokumen relevan yang terambil dari seluruh dokumen dengan jumlah tersebut. Dengan menggunakan nilai dari recall dan precision akan dicari nilai dari average precision untuk menghitung keefektifian dan keakuratan dari sistem temu kembali. Average precision adalah suatu ukuran evaluasi sistem temu kembali informasi yang diperoleh dari cara menghitung rata-rata precision pada seluruh tingkat recall (Grossman 1992). Hasil perhitungan recall dan precision untuk masing-masing fungsional dapat dilihat dalam Lampiran 8 sampai Lampiran 12. Grafik yang diperoleh dari hasil perhitungan recall dan precision (Gambar 7) menunjukan bahwa Fungsional Peneliti mengambil semua dokumen yang relevan saja sesuai dengan kueri yang

23 11 dimasukan ke dalam sistem temu kembali. Kinerja sistem temu kembali terhadap hasil pencarian cukup bagus, dengan nilai average precision antara 0.74 sampai dengan 0.85, artinya antara 74% sampai dengan 85% dokumen yang ditemukan oleh sistem bersifat relevan bagi pengguna. precision recall peneliti1 peneliti2 pustakawan1 pustakawan2 umum Gambar 7 Hasil perhitungan precision dan recall Fungsional Pustakawan mengambil semua hasil temu kembali, baik yang relevan maupun yang mendekati relevan, hal ini didasarkan bahwa pustakawan membutuhkan banyak data yang diambil dalam pengecekan metadata yang ada, juga untuk alternatif masukan temu kembali dokumen untuk pengguna. Kinerja sistem temu kembali cukup baik, yaitu antara 72% sampai 80% dokumen berhasil ditemukan oleh sistem. Kinerja sistem temu kembali pada Fungsional Umum sebesar 82% dokumen berhasil ditemukan. Fungsional Umum mengambil semua atau beberapa saja yang relevan, karena yang terpenting dokumen yang dicari ditemukan. Gambar 8 menggambarkan bahwa nilai average precision (AVP) dari hasil pengujian keseluruhan sebesar Hasil uji kinerja sistem menunjukan bahwa kinerja sistem sudah cukup baik disebabkan sistem telah menemukembalikan sebesar 79% dokumen relevan yang dicari oleh pengguna Precision Recall Gambar 8 Hasil perhitungan average precision dari lima pengujian sistem

24 12 Sistem temu kembali yang baik diharapkan untuk dapat memberikan nilai precision dan recall mendekati 1 seperti pada Gambar 9. Precision dan recall adalah faktor penting dalam mengevaluasi sistem temu kembali, tetapi ada keadaan trade-off (tarik-ulur) antara recall dan precision (Zhang 2008). Kondisi trade-off antara precision dan recall mengakibatkan terjadi 2 situasi ekstrim berikut (Cios et al. 2007) : a. Recall sangat tinggi dan precision relatif rendah. Sistem mengembalikan sejumlah besar dokumen yang mengikutsertakan hampir semua dokumen relevan tetapi juga mencakup sebagian besar dokumen yang tidak diharapkan. b. Precision terlalu tinggi dan recall rendah. Sistem mengembalikan beberapa dokumen dan hampir semuanya relevan, tetapi sejumlah besar dokumen relevan lain terabaikan. Gambar 9 Trade-off antara precision dan recall (Zhang 2008) Gambar 9 menunjukkan bahwa kondisi ideal dari sistem temu kembali pada nilai 1 untuk posisi precision dan recall. Kinerja dari pengembangan sistem temu kembali artikel jurnal digital PDII-LIPI mendekati nilai 1 untuk precision (Gambar 8). Hal ini berarti sistem mengembalikan sejumlah besar dokumen yang mengikutsertakan hampir semua dokumen relevan tetapi juga masih menemukembalikan sebagian dokumen yang tidak diharapkan. SIMPULAN Evaluasi yang dilakukan terhadap seluruh hasil pengujian menunjukkan bahwa sistem menemukan sejumlah besar dokumen yang dicari dengan nilai average presicion (AVP) sebesar Untuk pengembangan lebih lanjut, sebaiknya aplikasi dilengkapi dengan fasilitas yang dapat menangani kesalahan masukan pengguna serta fasilitas auto complete yang dapat memudahkan pengguna memilih kata kunci. Penggunaan koleksi dokumen yang lebih banyak dengan topik yang bervariasi akan memberikan perbedaan pada saat memilih kata yang akan digunakan sebagai kueri.

25 13 DAFTAR PUSTAKA Chu W. Liu Z, Mao W Textual Document Indexing and Retrieval via Knowledge Sources and Data Mining. Tersedia pada [10 Juli 2014] Cios KJ, Pedrycz W, Swiniarski RW, Kurgan L Data Mining A Knowledge Discovery Approach. New York, NY: Springer. Grossman D IR Book.[ Diakses tanggal: 12 September Hasibuan ZA Metodologi Penelitian Pada Bidang Ilmu Komputer dan Teknologi Informasi Jakarta: Fakultas Ilmu Komputer, Universitas Indonesia. Hyusein B, Patel A Web Document Indexing and Retrieval, LNCS 2588 pp , Springer Verlag Berlin Mandala R, Setiawan H Peningkatan Performansi Sistem Temu Kembali Informasi dengan Perluasan Query secara Otomatis. Bandung, Indonesia: Institut Teknologi Bandung. Zhang H Formulating Complex Queries Templates [tesisi]., Ohio, Canada: University of Waterloo.

26 14 Lampiran 1 Daftar istilah kueri dan dokumen yang relevan Bidang Kueri Dokumen Relevan ekonomi economic development 68788, 65395, 38101, 64726, 77794, 69128, 10016, 11806, 11811, 76231, 66337, 37577, 9794, 57178, 76977, 78427, 8682, 54217, 10321, 58348, 61674, 9027, 58368, 70413, 70923, 83385, 9330, 45283, 54359, 61016, 58163, 6529, 68889, 27230, 27358, 68133, 69926, 75506, 53267, 10336, 26397, 54491, 62373, 67185, 68148, 69144, 76928, 70586, 55671, 61615, 70561, 75431, 9822, 56086, 65729, 74305, 2618, 72178, 37945, 69575, 11172, 71375, 968, 6775, 9290, 10991, 59583, 63431, 67520, 64468, 77106, 4134, 5094, 6668, 8919, 10365, 12046, 27262, 54539, 59393, 61054, 72427, 72602, economic 65395, 70402, 67770, 66337, 77794, 69128, 8682, 10016, 54217, 86455, 11811, 37577, 9027, 11806, 45283, 64488, 9794, 74902, 6529, 10321, 54919, 54925, 59803, 68788, 68889, 76231, 9330, 58348, 60155, 69544, 76977, 78427, 84901, 8439, 10336, 26397, 54359, 57178, 58368, 59566, 61016, 67185, 69144, 69290, 70413, 70923, 76928, 9205, 9612, 27358, 37579, 38101, 38128, 58163, 59381, 61615, 68133, 69431, 75020, 75506, 76317, 61674, 2618, 11172, 54491, 62405, 71665, 72178, 83385, 624, 1555, 6775, 8863, 9290, 10991, 37945, 53300, 53358, 54122, 57655, 59399, 59583, 61375, 62779, 63109, 63431, 67520, 69575, 69926, 968, 971, 4134, 5094, 6099, 6576, 6668, 7030, 8919, 9778, 9822, 9902, 10365, 10804, 10805, 10833, 12046, 26786, 27230, 27262, 37818, 38047, 38286, 38338, 38484, 39189, 39224, 53267, 54539, 54739, 55671, 56086, 57110, 59393, 59574, 61054, 61622, 62373, 62544, 63137, 63230, 63285, 64468, 64726, 64728, 65729, 66742, 67709, 68077, 68148, 69572, 69873, 70561, 70586, 71180, 71375, 71488, 71875, 72427, 72570, 72594, 72602, 74249, 74305, 74510, 74532, 74603, 75431, 77106, 78231, agroindustry 67087, 78640, 79352, 71703, 78720, 69431, 968, 58649, 61054, 61674, 61794, 62543, 62612, 67174, 69144, 69568, 69575, 69806, 70413, 70529, 77914, 79334, 82252, 83357, 83371, bankruptcy 5753, 66715, 68158, 5852, 10385, 62405, 9845, 63109, 69679, 5843, 5850, 8918, 10804, 5720, 5846, 8928, 10944, transportation 54092, 63137, 61615, 68168, 55155, 72196, 6554, 58348, 67770, 68179, 78949, 5094, 9054, 11152, 25938, 39229, 55093, 55142, 59850, 60998, 61674, 62215, 62373, 62377, 63624, 68130, 70598, 70802, tax 38134, 61375, 54105, 72911, 6497, 38303, 60569, 62595, 75008, 11179, 54787, 77596, 55530, 64864, 64677, 9902, 60809, 64664, 26623, 38932, 63108, 63302, 64516, 27230, 26525, 6501, 7000, 10383, 54226, 64708, 9529, 62074, 64651, 69287, 9822, 59008, 69290, 11928, 82025, 8439, 10415, 38470, 83357, 2275, 5094, 9154, 9995, 11811, 38471, 67309, 69145, 69183, 77701, 84901

27 15 Bidang Kueri Dokumen Relevan Hokum legal aspects 68128, 45283, 64683, 82611, 5826, 53398, 70204, 71641, 9995, 11780, 64461, 71231, 77549, 78361, 53198, 71196, 2275, 5829, 37542, 38313, 38533, 53755, 55508, 55522, 59493, 59520, 59599, 60081, 60400, 60401, 61133, 63896, 66319, 66683, 67560, 68159, 68160, 70689, 70696, 70988, 71640, 75220, 76631, 79473, kesehatan crimes 54557, 5969, 79397, 1929, 10316, 79402, 70180, 76317, 64678, 37780, 53400, 10826, 70272, 1930, 10851, 39147, 59521, 61016, 71194, 71198, 10862, 17384, 71196, 6112, 7243, 8570, 10833, 10853, 10860, 10863, 11016, 11271, 17492, 38484, 56686, 67709, 68824, 73318, 75163, contract 8841, 5816, 8752, 5821, 58051, 5834, 9845, 10736, 10739, 9995, 72427, 11048, 37959, 5817, 11305, 53519, 4260, 9637, 58695, 8814, 8819, 10805, 10898, 11080, 11269, 27176, 38533, 39078, 59520, 62215, 62595, 66781, 68159, 68160, 69550, 69572, 69594, 69598, 71703, 72599, 72611, 73297, agricultural 68746, 83371, 9671, 11599, 54491, 6576, 78427, 61674, 8681, 58163, 83385, 70413, 61622, 58348, 8682, 10016, 54654, 67770, 69128, 72569, 77794, 82252, 967, 968, 10321, 10336, 39189, 55671, 57578, 58167, 61794, 62564, 66287, 66294, 69144, 69161, 72530, 73446, 74535, 76231, government 74603, 38700, 9902, 64708, 74980, 64677, 56814, 65996, 37949, 63248, 54736, 59524, 59630, 64226, 64485, 70561, 3883, 11179, 27358, 53267, 58695, 6501, 6959, 8846, 9256, 9794, 27225, 37945, 38156, 69926, 72911,74982, 75126, 10833, 11048, 39224, 56086, 64516, 68148, 8439, 8752, 11599, 26525, 37542, 57811, 83385, 2588, 8618, 8682, 11452, 11922, 38047, 53266, 53755, 60260, 61016, 61615, 64047, 64488, 71231, 79473, 968, 1555, 2275, 4134, 4369, 4404, 5821, 5843, 6576, 7185, 8541, 8820, 8928, 9163, 9173, 9589, 9778, 9845, 10016, 10316, 10415, 10980, 11172, 11232, 11811, 11882, 26397, 26965, 27230, 38128, 38256, 38303, 39084, 39384, 54491, 54501, 54654, 55271, 55499, 55512, 58945, 59656, 60041, 60211, 60667, 61424, 61622, 61674, 62457, 62538, 62595, 62677, 63097, 63345, 64678, 67709, 67770, 67886, 69128, 69161, 69287, 70413, 70894, 71323, 71345, 71375, 71624, 71641, 71665, 72239, 72519, 72711, 74807, 75149, 75173, 75506, 76317, 77794, 83357, 83371, Human 8541, 12109, 53398, 75163, 75173, 39221, 10842, 70699, 74971, 6099, 8984, 9163, 9173, 37550, 54527, 62361, 10964, 55597, 61879, 67185, 68179, 8570, 11305, 73446, 76169, 76358, 9326, 11224, 27321, 4115, 2017, 64368, 9515, 57390, 58021, 60041, 67171, 70894, 71665, 84590, 1886, 1937, 2015, 4188, 4251, 4291, 4652, 5850, 6051, 6326, 6576, 9256, 9642, 10314, 10321, 10739, 17221, 26773, 37579, 38272, 53198, 53608, 54722, 54903, 56086, 58368, 58695, 59243, 60260, 60998, 62086, 62215, 64060, 66337, 67886, 68013, 68086, 68128, 68788, 70413, 71147, 72239, 77549, 82252, avian influenza 11140, 54903, 55840, 62540, 9326, 62779, 61622, 63829, 67508, 64844, 55837, 67770, 67171, 11224, 27321, 58950, 60260

28 16 Bidang Kueri Dokumen Relevan kesehatan dental 68077, 26796, 54723, 55763, 60424, 61035, 63345, 64109, 67432, 11226, 17461, 54606, 26836, 54611, 60452, 17221, 54122, 68082, 26786, 27324, 54727, 57655, 62738, 68078, 54121, 54522, 55745, 57765, 69636, 2079, 11216, 11217, 27332, 55863, 59065, 80772, 4369, 69676, 4183, 10121, 11220, 11224, 17345, 17441, 26559, 26793, 26847, 26913, 27321, 37955, 38108, 54125, 54722, 54728, 64813, 67332, 68076, 68086, 69634, 71718, 79173, nutritional 26211, 67322, 62677, 54654, 54122, 624, 56766, 1767, 59044, 64794, 62541, 4250, 10119, 27396, 58915, 61386, 67195, 6482, 9508, 10120, 26212, 38235, 38330, 54427, 54452, 56440, 58601, 64783, 64791, 67306, 68351, 70844, age 67820, 9671, 54122, 624, 4369, 4383, 54121, 56766, 59065, 4250, 9515, 9786, 10385, 10863, 11332, 26786, 26793, 27396, 27482, 37977, 53144, 53459, 54445, 54618, 54728, 57655, 58617, 59044, 60667, 61424, 63345, 64109, 67135, 67171, 67520, 68077, 70224, 71323, 71875, 74479, 79211, malpractice 53789, 53198, 37887, 66779, 1928, 10671, 11788, 11882, 53569, 61232, 71251, medical 11882, 72694, 10671, 11199, 57390, 72711, 67196, 1705, 79970, 1727, 1687, 26836, 4325, 37973, 54600, 54618, 67195, 67886, 1719, 1725, 2015, 53459, 79971, 53789, 2017, 53138, 53198, 66779, 37887, 37519, 1712, 1928, 4134, 4183, 4188, 4245, 4250, 4251, 4260, 4291, 4369, 4383, 4652, 4722, 4959, 5855, 8515, 9326, 11224, 11232, 11788, 12114, 26793, 26796, 26812, 26934, 26946, 27321, 37601, 38194, 38338, 38973, 53440, 53983, 54191, 54603, 54611, 54625, 58011, 59685, 59690, 60916, 70988, pendidikan teaching materials 66045, 67476, 9122, 78949, 78950, 9652, 53178, 70224, 55628, 69199, 74686, 77838, 58706, 59535, 10687, 67520, 8968, 56048, 78935, 96380, 62528, 66804, 64471, 71706, 8634, 9009, 39059, 71003, 72073, 72651, 71375, 67369, 54007, 57419, 74671, 9905, 38596, 38898, 57458, 59803, 59839, 59840, 60311, 63173, 68603, 69192, 69493, 70708, 70903, 71412, 74245, 74666, 77321, 77466, 77869, 78943, achievement 57520, 59853, 74708, 5919, 66059, , 38827, 59839, 69200, 96380, 59856, 66804, 78950, 71015, 71362, 74666, 74678, 74686, 76690, 10697, 75008, 4427, 55628, 38887, 59243, 60549, 64261, 67322, 4402, 6046, 6694, 6717, 6773, 7030, 7032, 8968, 9009, 9173, 9437, 9623, 9786, 9984, 10606, 10763, 10764, 11226, 11489, 11633, 11806, 26796, 27396, 38284, 53198, 54522, 55619, 57110, 58872, 59320, 59583, 59658, 59803, 60311, 60452, 61375, 62457, 62544, 64680, 65359, 66073, 66902, 67021, 68148, 68204, 69192, 70598, 70714, 71019, 71412, 71624, 71648, 71703, 71875, 72073, 72602, 72651, 72657, 74275, 74667, 74677, 74971, 75020, 76231, 76569,76688, 76693, 76720, 78694, 78696, 78701, 82252

29 17 Bidang Kueri Dokumen Relevan pendidikan accounting 71412, 63460, 59630, 6887, 2585, 2618, 70523, 59121, 75730, 38395, 74708, 1555, 62544, 11549, 2578, 2581, 39365, 54506, 63991, 67429, 10055, 11165, 38272, 64112, 78633, 6725, 11925, 50386, 54703, 71339, 57520, 74666, 74716, 6717, 55619, 2358, 6645, 10329, 10950, 11689, 54919, 54925, 69200, 74677, 259, 6643, 9608, 9612, 9770, 54975, 64679, 74249, 75790, 78946, 9623, 72602, 74678, 9616, 59803, 4404, 11578, 26177, 39224, 54044, 55532, 4944, 5698, 6046, 6775, 6780, 7185, 9249, 9429, 9783, 9984, 10697, 10833, 11618, 11922, 17502, 26804, 27142, 27396, 38284, 38432, 38700, 39384, 50385, 53092, 59130, 59213, 59317, 59658, 59886, 60155, 60311, 60678, 60707, 60815, 63378, 63462, 64664, 64680, 65359, 66902, 66903, 68179, 69109, 69743, 69985, 69989, 71015, 72694, 74603, 74667, 74686, 74985, 75149, 76062, 76336, 76454, accountants 71412, 63460, 59630, 6887, 2585, 2618, 70523, 59121, 75730, 38395, 74708, 1555, 62544, 11549, 2578, 2581, 39365, 54506, 63991, 67429, 10055, 11165, 38272, 64112, 78633, 6725, 11925, 50386, 54703, 71339, 57520, 74666, 74716, 6717, 55619, 2358, 6645, 10329, 10950, 11689, 54919, 54925, 69200, 74677, 259, 6643, 9608, 9612, 9770, 54975, 64679, 74249, 75790, 78946, 9623, 72602, 74678, 9616, 59803, 4404, 11578, 26177, 39224, 54044, 55532, 4944, 5698, 6046, 6775, 6780, 7185, 9249, 9429, 9783, 9984, 10697, 10833, 11618, 11922, 17502, 26804, 27142, 27396, 38284, 38432, 38700, 39384, 50385, 53092, 59130, 59213, 59317, 59658, 59886, 60155, 60311, 60678, 60707, 60815, 63378, 63462, 64664, 64680, 65359, 66902, 66903, 68179, 69109, 69743, 69985, 69989, 71015, 72694, 74603, 74667, 74686, 74985, 75149, 76062, 76336, 76454, activity 628, 67369, 54607, 95498, 26773, 66804, 5919, 71019, 38887, 6069, 12010, 53208, 55619, 71003, 71014, 71147, 71645, 71648, 67021, 71004, 78946, 259, 38762, 66807, 67420, 71016, 9671, 63991, 69144, 74902, 78427, 9330, 38284, 61016, 75008, 6717, 9054, 11882, 27358, 53144, 54217, 54654, 58021, 61674, 63829, 64109, 67560, 68351, 68889, 71196, 78950, 2015, 2017, 4188, 5817, 5826, 5969, 6773, 7032, 8841, 9205, 9256, 9300, 9437, 9625, 9637, 9786, 9905, 10606, 10805, 11165, 11172, 11179, 11489, 11633, 17441, 39224, 54092, 54359, 54614, 54903, 54919, 54925, 57655, 58051, 58368, 59243, 59524, 59629, 60211, 61615, 62215, 62361, 62405, 62513, 62595, 63302, 64461, 64488, 65321, 65374, 67091, 67411, 67520, 67770, 68204, 68784, 69161, 69192, 70272, 70561, 70714, 70903, 71015, 71706, 71180, 71381, 72651, 72657, 72664, 73139, 73446, 57520, 74678, 74686, 74715, 74971, 74980, 75020, 75126, 75762, 76317, 76688, 76690, 76693, 76720, 76928, 78694, 78696, 78701, 78935, 79970, 82099, 84740

30 18 Bidang Kueri Dokumen Relevan pendidikan education 65395, 4402, 64112, 67185, 5919, 61532, 1886, 4404, 64368, 4163, 6069, 63108, 67476, 78949, 4968, 5969, 9794, 12010, 38156, 38596, 69199, 78361, 70523, 9287, 60424, 64047, 74479, 2578, 9671, 9770, 54787, 60211, 71375, 73446, 2015, 4115, 4260, 4369, 8968, 9009, 9173, 10314, 11549, 39059, 54603, 57483, 57655, 59065, 59130, 59803, 59856, 61424, 71016, 75790, 82099, 259, 2358, 4232, 4427, 4697, 4752, 4753, 4768, 6775, 7030, 7032, 9122, 9163, 9903, 9905, 10606, 10687, 11172, 26804, 27358, 37519, 38887, 50386, 53144, 54007, 57520, 59583, 59685, 59690, 59839, 59840, 60549, 62373, 62513, 62540, 63173, 64109, 64791, 65321, 66045, 66804, 67322, 67369, 67411, 67420, 67432, 67520, 68204, 68784, 69050, 69192, 69985, 69989, 70903, 71003, 71014, 71019, 71339, 71645, 71648, 71665, 71875, 72651, 72657, 72664, 74249, 74633, 74667, 74715, 74985, 76688, 76693, 77869, 78694, 78696, 78701, 78935, manajemen accounting information 63460, 59630, 38395, 38272, 1555, 63991, 6725, 11925, 9608, 54703, 9612, 9770, 54975, 64680, 10055, 72602, 74667, 6645, 10329, 54919, 54925, 26177, 59803, 9623, 55532, 9616, 63462, 11578, 5698, 9249, 11618, 27142, 53092, 59317, 59658, 60678, 60815, 76062, marketing 71610, 75152, 8890, 11505, 59629, 55704, 68740, 9637, 38936, 63285, 971, 71194, 71198, 71231, 74853, 54490, 62656, 71196, 11142, 71640, 55837, 829, 10929, 38937, 54611, 57811, 59447, 64734, 68793, 9368, 69062, 82611, 75020, 83357, 2017, 9287, 26566, 59381, 968, 1733, 6394, 38395, 58021, 58376, 72178, 73446, 83371, 938, 5094, 5817, 6576, 6775, 7243, 9385, 9903, 10053, 10495, 10548, 10668, 10711, 10787, 11140, 11269, 11500, 38303, 39201, 55671, 57736, 57822, 58368, 59583, 60081, 61674, 62215, 63829, 65996, 67087, 68168, 69598, 70529, 71381, 72196, 72427, 74305, 75220, 76454, 76928, 78640, bureaucracy 74980, 11634, 11316, 53267, 71624, 9902, 38128, 72239, 6394, 26965, 39084, 54736, 56086, 60778, 62538, 63248, 64226, 67650, 70871, 74971, 82269, entrepreneurs 67091, 58376, 59629, 9300, 59320, 72178, 54528, 64368, 17356, 71375, 64047, 38047, 38937, 53300, 61047, 68159, 829, 7226, 11172, 11269, 11452, 12075, 57110, 60348, 61532, 62656, 69050, 70561, 71069, 71381, 71624, strategic 10697, 1342, 67087, 2588, 53300, 62457, 938, 1886, 2017, 10053, 12071, 54113, 57483, 59098, 62840, 63248, 9163, 64226, 65530, 76231, 6394, 7180, 8530, 8863, 9173, 9251, 9290, 9385, 9427, 9623, 9632, 10787, 11142, 11152, 11811, 11829, 11925, 12046, 25938, 37818, 38852, 39201, 39221, 54226, 54491, 55271, 55530, 56086, 57811, 58005, 58376, 59243, 59320, 59524, 61375, 61532, 63149, 53532, 63533, 64250, 67196, 72599, 74633, 75163, 75762, 78231, 84740

31 Bidang Kueri Dokumen Relevan auditing 5789, 60705, 68799, 7185, 76454, 61225, 39224, 70461, 64679, 2509, 9616, 9783, 68740, 75149, 11922, 26177, 39384, 60700, 61377, 71671, 74686, 84732, 6643, 6645, 9625, 54527, 58804, 67226, 68793, 50385, 64680, 9429, 11186, 11618, 26242, 63378, 70410, 60041, 10329, 62544, 4944, 38432, 39385, 72711, 61232, 54044, 9249, 9623, 10950, 11165, 26566, 26946, 53092, 57993, 63302,

32 20 Lampiran 2 Contoh koleksi dokumen <sphinx:document id="39059"> <noid>39059</noid> <keyword>teaching materials; Educational quality; Learning processes; Biology education</keyword> <subject>penelitian ini bertujuan untuk mengetahui sejauh mana penggunaan media komputer secara interaktif dapat meningkatkan pemahaman siswa Kelas XI MAN 2 Model Palu terhadap materi struktur dan fungsi sel. Penelitian ini merupakan penelitian tindakan kelas yang dilaksanakan pada semester semester 1 tahun pelajaran 2006/2007 dan berlangsung dengan 2 siklus. Obyek Penelitian adalah siswa kelas kelas XI IPA 1 berjumlah 22 orang. Pelaksanaan penelitian mengikuti alur berfikir penelitian PTK. Hasil penelitian menunjukkan bahwa persentase rata-rata hasil belajar siswa pada siklus kedua mengalami peningkatan hingga mencapai 22,41 % (rata-rata nilai : 47,95 siklus 1 dan pada siklus 2 naik menjadi 70,36). 2}, demikian juga dengan aktivitas guru meningkat sebesar 13,3 %. Dengan demikian dapat disimpulkan bahwa penggunaan media komputer secara interaktif dapat meningkatkan pemahaman siswa terhadap konsep struktur dan fungsi sel setta aktivitas guru.</subject> <content>peningkatan pemahaman siswa terhadap konsep struktur dan fungsi sel melalui penggunaan media komputer secara interaktif pada siswa kelas XI IPA 1 Madrasah Aliyah Negeri (MAN) 2 model Palu</content> </sphinx:document>

33 21 Lampiran 3 Hasil pencarian dokumen fungsional peneliti pertama Bidang Kueri relevan Hasil Dokumen Dokumen sistem Relevan Tidak Relevan ekonomi economic development economic agroindustry bankruptcy transportation tax hukum legal aspects crimes contract agricultural government human kesehatan avian influenza dental nutritional age malpractice medical pendidikan teaching materials achievement accounting accountants activity education manajemen accounting information marketing bureaucracy entrepreneurs strategic auditing

34 22 Lampiran 4 Hasil pencarian dokumen fungsional peneliti kedua Bidang Kueri relevan Hasil Dokumen Dokumen Tidak sistem Relevan Relevan ekonomi economic development economic agroindustry bankruptcy transportation tax hukum legal aspects crimes contract agricultural government human kesehatan avian influenza dental nutritional age malpractice medical pendidikan teaching materials achievement accounting accountants activity education manajemen accounting information marketing bureaucracy entrepreneurs strategic auditing

35 23 Lampiran 5 Hasil pencarian dokumen fungsional pustakawan pertama Bidang Kueri relevan Hasil Dokumen Dokumen Tidak sistem Relevan Relevan ekonomi economic development economic agroindustry bankruptcy transportation tax hukum legal aspects crimes contract agricultural government human kesehatan avian influenza dental nutritional age malpractice medical pendidikan teaching materials achievement accounting accountants activity education manajemen accounting information marketing bureaucracy entrepreneurs strategic auditing

36 24 Lampiran 6 Hasil pencarian dokumen fungsional pustakawan kedua Bidang Kueri relevan Hasil Dokumen Dokumen sistem Relevan Tidak Relevan ekonomi economic development economic Agroindustry Bankruptcy Transportation Tax hukum legal aspects crimes contract agricultural government human kesehatan avian influenza dental nutritional age malpractice medical pendidikan teaching materials achievement accounting accountants activity education manajemen accounting information marketing bureaucracy entrepreneurs strategic auditing

37 25 Lampiran 7 Hasil pencarian dokumen fungsional umum Bidang Kueri relevan Hasil Dokumen Dokumen Tidak sistem Relevan Relevan ekonomi economic development economic agroindustry bankruptcy transportation tax hukum legal aspects crimes contract agricultural government human kesehatan avian influenza dental nutritional age malpractice medical pendidikan teaching materials achievement accounting accountants activity education manajemen accounting information marketing bureaucracy entrepreneurs strategic auditing

38 Lampiran 8 Hasil perhitungan recall dan precision pada fungsional peneliti pertama Kueri Recall 0,00 0,10 0,20 0,30 0,40 0,50 0,60 0,70 0,80 0,90 1,00 1 economic development ,95 0,95 0,96 2 economic 1 0,05 0,09 0,09 0,11 0,13 0,13 0,15 0,17 0,17 0,17 3 agroindustry bankruptcy transportation ,67 0 0, ,19 6 tax ,88 0,9 0,92 0,93 0,94 0,92 0,76 7 legal aspects ,94 0,95 0,96 0,9 0,91 0,97 0,96 8 crimes ,07 0 0,1 0 0,13 0,15 0 0,17 9 contract 1 0,29 0 0,38 0,44 0,55 0,58 0,62 0,64 0,67 0,58 10 agricultural ,75 0,8 0,69 0,69 0,65 0,64 0,59 11 government human ,75 13 avian influenza ,88 14 dental ,95 0,95 0,96 0,96 0,97 15 nutritional ,88 0,9 0,92 0,93 0,94 0,94 0,9 0,91 16 age , ,28 17 malpractice medical 1 1 0,63 0,71 0,69 0,74 0,71 0,69 0,68 0,69 0,69 19 teaching materials ,92 0,94 0,95 0,96 0,97 0,97 0,95 0,93 20 achievement 1 1 0,2 0,24 0,3 0,35 0,39 0,43 0,45 0,48 0,49 21 accounting ,96 0,96 0,97 0,97 0,93 0,9 22 accountants ,94 23 activity ,67 0,63 0,6 0,59 0,59 0,59 0,61 24 education 1 0,33 0,33 0,5 0,6 0,32 0,33 0,36 0,38 0,41 0,43 25 accounting information ,5 26 marketing 1 1 0,33 0,42 0,46 0,53 0,45 0,48 0,45 0,42 0,44 26

39 No Kueri Recall 0,00 0,10 0,20 0,30 0,40 0,50 0,60 0,70 0,80 0,90 1,00 27 bureaucracy ,9 0,92 0,93 0,94 0,94 0,95 28 entrepreneurs ,86 0,7 0,75 0,79 0,82 0,83 0,55 0,57 29 strategic ,84 0,76 0,76 0,79 0,73 0,7 30 auditing 1 0,75 0,86 0,82 0,86 0,79 0,78 0,81 0,77 0,69 0,7 Rata - rata 0,90 0,75 0,71 0,73 0,67 0,73 0,66 0,70 0,67 0,65 0,70 27

40 Lampiran 9 Hasil perhitungan recall dan precision pada fungsional peneliti kedua No Kueri Recall 0,00 0,10 0,20 0,30 0,40 0,50 0,60 0,70 0,80 0,90 1,00 1 economic development ,95 0,95 0,96 2 economic 1 0,05 0,09 0,09 0,11 0,13 0,13 0,15 0,17 0,17 0,17 3 agroindustry bankruptcy transportation ,67 0 0, ,19 6 tax ,88 0,9 0,92 0,93 0,94 0,92 0,76 7 legal aspects ,94 0,95 0,96 0,9 0,91 0,97 0,96 8 crimes ,92 0,93 0,95 0,95 0,96 0,97 0,97 0,97 9 contract 1 0,29 0 0,38 0,44 0,55 0,58 0,62 0,64 0,67 0,58 10 agricultural ,75 0,8 0,69 0,69 0,65 0,64 0,59 11 government human ,75 13 avian influenza ,88 14 dental ,95 0,95 0,96 0,96 0,97 15 nutritional ,88 0,9 0,92 0,93 0,94 0,94 0,9 0, age , ,28 17 malpractice medical 1 1 0,63 0,71 0,69 0,74 0,71 0,69 0,68 0,69 0,69 19 teaching materials ,92 0,94 0,95 0,96 0,97 0,97 0,95 0,93 20 achievement 1 1 0,2 0,24 0,3 0,35 0,39 0,43 0,45 0,48 0,49 21 accounting ,96 0,96 0,97 0,97 0,93 0,9 22 accountants ,94 23 activity ,67 0,63 0,6 0,59 0,59 0,59 0,61 24 education 1 0,33 0,33 0,5 0,6 0,32 0,33 0,36 0,38 0,41 0,43 25 accounting information ,5 26 marketing 1 1 0,33 0,42 0,46 0,53 0,45 0,48 0,45 0,42 0,44 No Kueri Recall