M. Pandu Ristiyono 1. Keyword : Mapping Knowledge, Economic,Co-Words, Bibliometric, Citation

Transkripsi

1 KAJIAN BIBLIOMETRIK BAHAN AJAR FAKULTAS EKONOMI UNIVERSITAS TERBUKA: Studi Analisis di Pusat Layanan Pustaka Universitas Terbuka Menggunakan Analisis Sitiran dan Co Words M. Pandu Ristiyono 1 ABSTRACT Penelitian ini menggunakan Analisis Sitiran, analisis sitiran digunakan untuk mengetahui Proposi komposisi dalam menulis bahan ajar Fakultas Ekonomi Universitas Terbuka. Secara khusus penelitian ini adalah (1) Mengidentifikasi Pengarang yang dominan yang disitir dalam penulisan Bahan Ajar FEKON UT (2) Usia Literatur Yang disitir. Hasil Penelitian menunjukan pengarang yang sering disitir tertinggi adalah Soekartawi, dan Nuriman Hasibuan, Aeker Davids, Bartens K., Boediono, Brigham Eugene, mereka merupakan pengarang yang paling sering disitir dalam penulis bahan ajar Fekon UT. Jumlah seluruh sitiran yang disitir pada penelitian ini adalah 2410 dokumen dengan rata rata sitiran adalah 53 sitiran per Bahan Ajar Usia Literatur yang tertua disitir adalah tahun 1935 dan yang termuda tahun Tingkat keusangan atau paro hidup usia dokumen ini masih jauh dibawah tingkat keusangan atau paro hidup dokumen yang disitir didalam bidang ilmu yang sama di negara Eropa dan Asia. Namun demikian, bahwa sekitar 68,5% dokumen yang disitir dalam seluruh Bahan ajar berusia dibawah usia 15 tahun atau berada dibawah titik usia keusangan dokumen. Terdapat 8 ( Delapan )bentuk dan atau jenis dokumen yang disitir pada seluruh disertasi yaitu: buku, makalah, laporan penelitian, terbitan pemerintah, tesis/disertasi, majalah, jurnal, artikel lepas dari internet ( bukan jurnal ) dan bentuk lainnya. Keyword : Mapping Knowledge, Economic,Co-Words, Bibliometric, Citation PENDAHULUAN Albert Einstein percaya bahwa ilmu pengetahuan tidaklah lebih dari suatu penyempurnaan dari cara berpikir sehari-hari. Penyempurnaan ini dapat dicapai lewat penemuan dari penyempurnaan metode ilmiah. Kesatuan semua sains hanya terletak dalam metodenya, bukan dalam materinya, karena itu metode ilmiah berlaku untuk semua sains dan juga semua teknologi yang bisa diterapkan secara luas dalam disiplin lain. Ilmu pengetahuan berkembang dalam sebuah proses yang berlangsung secara bertahap dan berubah secara perlahan-lahan. Secara konsisten dan sistematis, ilmu disusun di atas dasar-dasar yang telah ada sebelumnya dan membentuk suatu kerangka keilmuan yang bersifat kumulatif. Ilmu baru bergantung dan berkembang berdasarkan ilmu yang telah ada. Ilmu baru berasimilasi dengan ilmu yang lebih dulu ada melalui proses difusi dan pembelajaran di antara para peneliti (Surtikanti, 2005). 1 Disampaikan pada Seminar Hasil Penelitian di UTCC tanggal November

2 Dalam menciptakan pengetahuan peneliti melakukan penelitian atau kajian ilmiah yang bertujuan untuk memecahkan suatu masalah dengan menggunakan cara-cara dan metode-metode yang bersifat ilmiah. Dengan demikian Peneliti dituntut untuk memiliki sejumlah pengetahuan dan alat-alat serta fasilitas-fasilitas lainnya yang cukup untuk melaksanakan tugasnya dengan lancar sehingga dapat mencapai hasil-hasil yang dapat di pertanggungjawabkan secara ilmiah. Permasalahan yang penting dalam menganalisis perkembangan ilmu pengetahuan dan teknologi adalah bagaimana mendifinisikan dan menggambarkan bidang tertentu dari ilmu pengethaun yaitu subjek, pendekatan dan persepsi. Subjek mengacu kepada bidang akademis dan spesialisasi, pendekatan mengacu kepada teknik, teori dan subjek tersebut. Sedangkan persepsi adalah menyangkut dimensi psikologis. Domain kajian suatu bidang ilmu pengetahuan dapat dilihat dengan melakukan visualisasi pengetahuan. Visualisasi ilmu pengetahuan dapat diwujudkan dalam bentuk peta 2 sehingga muncullah bidang pemetaan pengetahuan atau knowledge mapping. 3 Pemetaan pengetahuan ini digunakan untuk berbagai keperluan diantaranya memberikan batasan program penelitian, keputusan menyangkut aktifitas yang berkenaan dengan teknolgi, disain struktur basis pengetahuan serta pembuatan program pendidikan dan pelatihan.(sulistyo-basuki, 2001:1) Hubungan kedekatan antar dokumen merupakan salah satu bidang subjek kajian bibliometrika. Bibliometrika pertama kali diperkenalkan oleh Pritchard tahun 1969, ketika ia mengkaji proses komunikasi tertulis secara kuantitatif. Pritchard juga mendefinisikan bibliometrika sebagai aplikasi metode statistika dan matematika. Sementara itu Von Ungeern-Sternberg (1995) mendefinisikan bibliometrika merupakan kajian yang mengaplikasikan metode matematika dan statistika untuk mengukur suatu perubahan baik secara kuantitatif maupun kualitatif pada sekumpulan buku atau media lainnya. Salah satu subjek kajian bibliometrik adalah hubungan dokumen. Dua dokumen atau lebih dikatakan mempunyai hubungan apabila dapat dilihat dari penjajaran dokemen tersebut pada koleksi perpustakaan, yang pada hakekatnya dimaksudkan untuk memvisualisasikan struktur ilmu pengetahuan. Penelitian tentang kajian pemetaan ilmu pengetahuan dengan menggunakan analisis bibliometrik adalah pemetaan terhadap bioteknolgi yang dilakukan oleh Mymoon dan Raghavan (2001). Dijelaskan bahwa pemetaan ilmu pengetahuan dapat dilakukan dengan berbagai macam cara diantaranya adalah berdasarkan klasifikasi (coclassification) dan kata kunci (co-words). Dari penjelasan diatas dapat dikatakan bahwa pemetaan dalam bidang bibliometrika adalah pembuatan peta hubungan sekelompok dokumen berdasarkan kemunculan bersama (co-occurance) dari variabel yang dimiliki oleh masing-masing dokumen. Kemunculan bersama ini dapat terjadi dalam penyitiran bibliografi atau pasangan bibliografi (bibliogaphic coupling), kemunculan bersama karena kata-kata atau istilah yang dipakai oleh pasangan dokumen (co-words) yang oleh kapesa (1998) 2 Dalam KBBI Visualisasi didefinisikan sebagai pengungkapan suatu gagasan atau perasaan dengan menggunakan gambar, tulisan, peta, grafik. 3 Peta ilmu pengetahuan adalah alat relasi yang meyediakan informasi anatr hubungan entitas yang dipetakan (spasser, ) 2

3 digunakan istilah keyword, kemunculan bersama karena pasangan dokumen (dua majalah) atau dua pengarang atau dua dokumen disitir majalah lain atau pengarang lain atau dokumen lainnya secara simultan sehingga membentuk co-citation, dan kemunculan bersama karena kesamaan klas dokumen (co-classification). Pemetaan co-words dilakukan melalui analisis kemunculan istilah yang dipakai bersama oleh suatu dokumen dengan melihat kata-kata yang dipakai secara bersama oleh suatu dokumen. Kopesa (1998) dalam penelitiannya menyajikan pemetaan co-words berdasarkan kata kunci (keyword) yang dimiliki oleh artikel yang ditelitinya, dimana keyword dari suatu artikel dipasangkan dengan artikel lain untuk menentukan co-words. Hasil nya adalah co-words yang Kopesa namakan tecnology map Analisis co-words didasarkan pada co-occurance kata kunci yang digunakan untuk mengindeks artikel atau dokumen. metode ini sangat bermanfaat dalam pemetaan isi dokumen dalam bidang ilmu. Hubungan antar istilah pada analisis co words dapat di kaji dengan menggunakan perangkat lunak tertentu, seperti CAIR yang digunakan oleh Coutler, Monarrch, Konda; leximamppe digunakan oeh De looze, emrie; SAS Packge digunakan oleh Hasibuan; SPSS digunakan oleh Spasser, McCain, Morris, dan lainlainya. Program tersebut dapat mengelompokan dokumen sesuai dengan kedekatan dokumen tersebut. Untuk memperoleh hasil visual yang terbentuk dari analisis kluster dapat digunakan analisis lanjutan seperti Mutidimensional scaling (MDS). MDS berhubungan dengan pembuatan grafik (MAP) yang berguna untuk menggambarkan posisi sebuah objek yang lain berdasarkan kemiripan objek tersebut (Santoso, Tjiptono, 2001, 322) Dorongan untuk mengembangkan ilmu pengetahuan juga menjadi dasar bagi para dosen Universitas terbuka untuk melakukan penelitian bidang Pendidikan dengan melakukan kegiatan penelitian, pengkajian, percobaan dan penemuan baru secara individual maupun berkelompok dan bekerjasama. Penelitian ini bertujuan : (1) Memetakan ilmu pengetahuan berdasarkan tulisan artikel jurnal dosen universitas terbuka tahun dengan analisis co-words. Metode Penelitian Penelitian ini dilakukan di Universitas Terbuka, pada bulan Januari juli 2012 objek yang digunakan dalam penelitian ini adalah Bahan ajar (modul) Bidang ilmu ekonomi Universitas Terbuka. Pengumpulan dan Analisis Data Penelitian ini menggunakan metode deskritif, artinya berdasarkan data yang ada, data diperoleh dari bahan ajar bidang ilmu ekonomi UT. data yang digunakan berjumlah 76 modul ekonomil. Dalam penelitian ini, ada 6 kegiatan utama yang dilakukan, yaitu ; 1. mendapatkan dokumen modul ekonomi di puslata UT Universitas Terbuka, guna menentukan bagian yang akan diteliti. Dengan mendapatkan dokumen tersebut pengumpulan data mudah dilakukan. 2. pengumpulan data sesuai dengan kebutuhan. 3. analisis subjek terhadap dokumen. Tujuannya agar mendapatkan kata kunci setiap dokumen. Setiap kata kunci distandarkan dengan tesaurus menjadi descriptor. 4. analisis hubungan antara dokumen. Kegiatan ini dilakukan dengan dokumen lainnya berdasarkan kata kunci. 3

4 5. melihat descriptor apa saja dalam analisis co-words yang menyebabkan terjadinya pengelompokan dokumen. 6. Teknik Pengumpulan Dokumen Teknik pengumpulan data dilakukan dengan langkah-langkah sebagai berikut : Setiap dokumen diberi kode dari nomor D01, D0 dan seterusnya. Kemudian artikel tersebut ditentukan subjeknya lalu dikeluarkan kata kuncinya, setelah diketahui kata kunci kemudian ditentukan deskriptor dengan menggunakan thesaurus online. Yang menggunakan thesaurus pendidikan Pengolahan dan Analisis data Pengolahan Data Pengolahan data ini bertujuan untuk mendapatkan kata kunci atau descriptor dokumen. Untuk itu setiap dokumen dianalisis untuk ditetapkan subjek,kata kunci guna mewakili dokumen tersebut. Dalam pengelompokan dan pemetaan ilmu pengetahuan sesuai dengan tujuan penelitian. Dibawah ini terlihat hasil dari pengolahan data Gambar.1 contoh prototype Analisis Data 1) Analisis subjek Judul suatu dokumen dapat mengukapkan isi dokumen yang bersangkutan selanjutnya apabila dibutuhkan, maka abstrak juga dapat membantu untuk menentukan subjek. Dalam penelitian ini kata-kata dalam judul maupun abstrak dianalisis untuk menentukan subjek dan kata kunci.untuk keperluan tersebut digunakan thesaurus. Sedangkan untuk pemilihan descriptor atau kata kunci berpedoman pada thesaurus ilmu pendidikan, yang digunakan dalam hal ini dari ERIC (Education Resources Information Centre) dengan alamat www. Eric.ed.gov 2) Analisis Co-Words 4

5 Analisis co-words dilakukan dengan memasangkan satu dokumen dengan dokumen lainnya berdasarkan kata kunci yang dimiliki bersama oleh kedua dokumen yang dipasangkan. Kemudian membandingkan kemunculan descriptor 3 4 kata yang dimiliki berasama kedua dokumen dan selanjutnya menghitung kemunculan kata kunci secara bersama-sama pada setiap pasangan dokumen dengan excel / SPSS. 3) Analisis Data Multivariat Metode ini dirancang untuk analisis data inferensial atau deskritif dari data kuantitatif. Metode analisis data multivarite kaya dengan tampilan grafisnya yang memperihatkan hubungan antar variable yang sedang diselidiki.analisis multivariate adalah analisis statistik yang bertujuan untuk mengetahui hubungan lebih dari satu variable independent dengan satu atau lebih variable dependen dan atau perbedaan lebih dari dua sampel/kelompok PEMBAHASAN Jumlah Bahan Ajar (modul) Fakultas Ekonomi Universitas Terbuka adalah sebanyak 76 judul., sedangkan jumlah kata kunci yang dapat diekstrak dari 76 judul artikel tersebut adalah sebanyak 238 kata kunci dengan rata-rata setiap judulnya adalah 3.13 Tabel 4 indeks kata kunci Modul Fakultas Ekonomi Universitas Terbuka lebih dari satu frekuensinya Ekonomi perburuhan Ekonomi keuangan Koperasi Keuangan Negara(public) Ekonomi internasional Produksi Makroekonomi Situasi dan kondisi ekonomi Bank dan perbankan Ekonomi pertanian Akuntansi Auditing Manajemen produksi Pemasaran Organisasi dan keuangan Sumberdaya manusia Bahan Ajar (Modul) Fakultas Ekonomi Universitas Terbuka Jumlah Bahan Ajar FEKON UT sebanyak 76 Judul. Dengan demikian kombinasi pasangan dokumennya adalah 76(76-1)/2 = 2850 Setelah dilakukan analisis co-words, maka lembaran kerja hasil perhitungan similarity di inputkan ke dalam SPSS editor sesuai lembaran kerja perhitungan similarity Tabel 7. Potongan dari Co-words similarity Matrix Bahan Ajar FEKON UT 5

6 D01 D02 D03 D04 D05 D06 D07 D08 D09 D01 0 D D D D D D D D D Matriks pada gambar merupakan matriks simple matching yang disusun segitiga dari atas ke bawah. Hanya sebagian similarity matriks yang dapat ditampilkan. Kode (D ) pada masing-masing baris menunjukan nomor dokumen Analisis Gugus Penelitian ini menggunakan matriks dissimilarity untuk analisis gugus dengan metode complete linkage (furthest neighbor). Matriks tersebut diperoleh dari matriks koefisien Jaccard. Metode complete linkage akan menghasilkan dendogram (a tree like graph). Dendogram berfungsi untuk memperlihatkan terjadinya proses gugus secara grafis. Hasil gugus yang terbentuk tidak membutuhkan uji statistik, selain penilaian secara subjektif Sebagaimana yang diungkapkan oleh Andenberg (1973, 11) bahwa secara umum analisis gugus tidak membutuhkan pengujian hipotesa. Tujuan analisis gugus dalam penelitian ini adalah untuk memperlihatkan struktur tersembunyi (inherent structure) dari suatu kumpulan dokumen berdasarkan co-words. Untuk mendapatkan dendogram dari proses gugus pada modul ekonomi ut dilakukan proses yang sama seperti pada analisis gugus pada bahasan diatas. Lihat hasil koefisien jaccard dan matriks dissimilarity. Tabel 10. potongan dari matriks koefisien Jaccard Bahan Ajar D01 D02 D03 D04 D05 D06 D07 D.. D63 D01 0 D D D D D D D D D

7 Gambar. potongan dari Dissimilarity matrik tahun Bahan Ajar D01 D02 D03 D04 D05 D06 D07 D.. D63 D01 0 D D D D D D D D 0 D Gambar 6. Dendogram HCA Co-words Bahan ajar Fekon UT Dari gambar diatas dapat dijelaskan bahwa Bahan Ajar Fekon UT dari 76 Bahan Ajar dapat dikelompokan menjadi 5 kelompok, dengan kriteria bahwa setiap kelompok 7

8 sekurang-kurangnya 2 Modul. Kelompok pertama sebanyak 36 Modul, kelompok 2 terdiri dari 12 Modul, kelompok 3 terdiri dari 9 Modul, kelompok 4 terdiri dari 11 Modul, kelompok 5 terdiri dari 8 Modul Skala Multidimensi Hasil pemetaan yang berasal dari analisis gugus untuk Bahan Ajar FEKON UT Universitas Terbuka memperlihatkan dokumen bergerombol pada beberapa tempat. Untuk melihatnya satu persatu gugus diperlukan pembesaran 500%. Gambar 8. Peta MDS FEKON UT Dari gambar diatas dapat dijelaskan bahwa Bahan Ajar FEKON UT dari 76 Modul dapat dikelompokan menjadi 5 kelompok, dengan kriteria bahwa setiap kelompok sekurang-kurangnya 2 Modul. Kelompok pertama sebanyak 36 Modul yang bersubjek Manajemen, kelompok 2 terdiri dari 12 Modul l bertopik Akuntansi, kelompok 3 terdiri dari 9 Modul mempunyai subjek Mikroekonomi, kelompok 4 terdiri dari 11 Modul mempunyai subjek Keadaan ekonomi, kelompok 5 terdiri dari 8 Modul diberi subjek Ekonomi keuangan Untuk kelompok Manajemen tampak terlihat bergerombol pada kuadran pertama hal ini bias terjadi dikarenakan Modul UT untuk bidang manajemen banyak di pengaruhi dari banyaknya referensi dalam setiap tulisan bahan ajar ekonomi UTdan juga masing-masing biasanya lebih dari 2 kata kunci. Penelitian ini menggunakan pendekatan analisis subjek, analisis co-words dan analisis multivariat unluk menentukan struktur pengetahuan bidang ilmu ekonomi di UT Populasi dari modul ilmu ekonomi adalah sebanyak 76 modul, diperoleh 238 kata kunci. Rata-rata kata kunci setiap judulnya adalah 3,13. ini dapat dikatakan rendah jika dibandingkan dengan penelitian bidang lain yang mencapai 5,7.. 8

9 Setelah diperoleh kata kunci dari hasil analisis subjek, kemudian dilakukon analisis cowords, analisis gugus dan skala multidimensi. Dari hasil peta modul UT bidang ekonomi ini, kelompok yang menulis manajemen tetap mendominasi yaitu prosentasenya (48.36%) yang menulis Manajemen. Sedangkan Akuntansi berjumlah 12 artikel, selanjutnya Mikroekonomi berjumlah 11 artikel, 9 artikel yang menulis tentang keadaan ekonomi dan 8 artikel bertajuk ekonomi keuangan. Tetapi yang menulis dibidang non ekonomi sudah tidak tampak. Sebelum sampai pada kesimpulan dalam penelitian, penulis menarik beberapa proposisi sebagai interpretasi dari hasil analisis data : Untuk proposi penulisan modul ekonomi UT proposinya sebagai berikut: No JENIS JUMLAH PROSEN 1 Buku , 58 % 2 Jurnal 143 5,93% 3 Bentuk lainnya 132 5,47% JUMLAH % Sedangkan untuk pengarang yang dominan dalam penulisan bahan ajar ekonomi UT adalah sebagai berikut: No Nama Frekwensi 1 Aeker Davids 9 2 Bartens K 9 3 Brigham Eugene Philip Kotler Soekartawi Noeriman Hasibuan 7 7 Boediono 7 Sedangkan untuk Tingkat keusangan Literarur sebagai berikut: No Periode Sitiran Prosen % % % % sekarang % JUMLAH % Untuk usia literature yang paling tua adalah tahun 1935, yaitu handbook of social psychology Worcester mass. Dari Clark University, yang ditulis oleh GW Allport. Sedangkan untuk jumlah dokumen yang disitir adalah sebagai berikut: No KODE JUMLAH 1 EKMA IESP EKSI

10 KESIMPULAN Dari hasil penelitian ini dapat diambil beberapa kesimpulan yang berkenan dengan tulisan Bahan ajar bidang ekonomi Universitas terbuka adalah sebagai berikut : 1. Berdasarkan analisis subjek diperoleh 238 kata kunci dari 76 Modul ekonomi Artinya setiap modul rata-rata memiliki 3.13 kata kunci. 2. Berdasarkan analisis co-words, hasil pengelompokan Modul ekonomi Universitas Terbuka, terdiri dari 5 kelompok masing-masing: Manajemen, akuntansi,mikroekonomi, keadaan ekonomi, ekonomi keuangan. 3. Sedangkan untuk analisis sitiranya rata-rata paro hidup literature yang disitir 8-10 tahun, masih cukup ideal dalam sebuah tulisan, khususnya di asia yang rata-rata tulisannya tahun.. Saran Dari hasil penelitian ini beberapa hal yang disarankan, adalah sebagai berikut ; 1. Pengelompokan dan pemetaan berdasarkan analisis co-words, sangat dipengaruhi oleh kemampuan untuk menganalisis subjek dokumen. Karena itu disarankan dalam penentuan subjek dari objek modul, perlu dibantu orang yang berlatar belakang ilmu perpustakaan. 2. Untuk penelitian selanjutnya, disarankan agar analisis dilakukan dalam beberapa dimensi. Misalnya dengan Bradford atau dalil Lotka ataupun kolaborasi. DAFTAR PUSTAKA Beaver, B. de B. and Xosen, R Studies in Scientific Collaboration. Scientometrics, 1(3): p Egghe, L Theory of Collaborative Measures. Information Processing and Management, 27 (2-3): p Fox, Mary F Publication Productivity Among Scientist: a critical review. Social Studies of Science 13 (2) May: 1983, p J. Qin, F. W. Lancaster, B. Allen Types and level of collaboration in interdisciplinarity research in the sciences. Journal of the American Society for Information Science, 48:pages Katz, J. Sylvan and Ben R. Martin What is research collaboration?, Research Policy, 26, pages Katz, J. Sylvan and Diana Hicks How much is a collaboration worth? A calibrated bibliometric model, Scientometrics, 40, pages Laudel, Grit (2001b), Collaboration, creativity and rewards: Why and how scientists collaborate, International Journal of Technology Management. Special Issue on researcher careers 22, Iss.8 (inpress). Melin, Göran and Olle Persson (1996), Studying research collaboration using coauthorships, Scientometrics, 36, pages

11 Pao, Miranda Lee Coauthorship as Communication Measure. Library Research 2: p Prihanto, Igif G Kajian Kolaborasi Peneliti Bidang Kedirgantaraan tahun [Tesis]. Jakarta: Universitas Indonesia. Prihanto, Igif G Kolaborasi. Kumpulan Makalah Kursus Bibliometrika. Masyarakat Informetrika Indonesia, Universitas Indonesia Mei Jakarta. Ristiyono, M.Pandu Pemetaan bidang ilmu Pendidikan Berdasarkan Artikel Jurnal Ilmu Pendidikan universitas Terbuka Tahun Menggunakan Analisis Co- Word. Bogor: IPB. Scummer, J Multidisciplinarity, Interdisciplinarity, and Research Collaboration in Nanoscience and Nanotechnology. Paper Submitted for Publication to Scientometrics MB Septiyantono, Tri Kolaborasi Penulis Artikel yang Dimuat pada Geneeskundig Tijdschrift Voor Nederlandsch Indie , Journal of Indonesian Medical Association , Majalah Kedokteran Indonesia [Tesis]. Jakarta: Universitas Indonesia. Shaw, W.M., Jr Information Theory and Scientific Communication. Scientometrics, 3(3): p Smith, David and Katz, J.S Collaborative approaches to research: final report (HEFCE Fundamental Revies of Research Policy and Funding: Higher Education Policy, University of Leeds and the Science Researh Unit, University of Sussex).. Sulistyo-Basuki Sebuah Kajian Teori Graf (graph Teory) Terhadap Kolaborasi Penulis Kedokteran dan Pertanian Indonesia Majalah Universitas Indonesia (4): hlm Sumaryanto, Yohanes Suatu Kajian Bibliometrika Terhadap Pola Kepengarangan Pada Artikel Yang dimuat di Majalah Ilmiah Terbitan Indonesia. [Skripsi]. Jakarta: Universitas Indonesia. Sumbramanyam, K Bibliometrics Studies of Research Collaboration: a Review. Journal of Information Science, 6(1): p.34 Surtikanti, Ratih Kajian Kolaborasi Interdisipliner Peneliti di Indonesia: Studi kasus pada program riset unggulan terpadu I-VII. [Tesis]. Jakarta: Universitas Indonesia. Suryadi, D Ruang Circuit Suatu Graph. Matematika dan Komputer, 50 : hlm Susanto, Banu Kolaborasi Peneliti Bidang Ilmu Pengetahuan dan Teknologi di Indonesia tahun : Studi kasus pada 4 lembaga pemerintah nondepartemen Bidang Riset dan Teknologi. Tesis, Universitas Indonesia, Universitas Terbuka Pedoman Pelaksanaan Penelitian LPPM-UT. Walpole, Ronald E Pengantar Statistika. PT. Gramedia Pustaka Utama, Jakarta. 11

12 Van Raan, A. F. J. (1998a), The influence of international collaboration on the impact of research results: Some simple mathematical considerations concerning the role of self-citations, Scientometrics 42 (3), pages Van Raan, A.F.J. (1998b), In matters of quantitative studies of science the fault of theorists is offering too little and asking too much, Scientometrics, 43, pages Wardah, Vivit Kajian Kolaborasi Interdisipliner Peneliti Bidang Pertanian : Studi Kasus Penelitian Badan Litbang Pertanian Tahun Bogor : IPB. Zuckerman, Harriet A Patterns of Name Ordering Among Authors of Scientific Papers: a study of social symbolism and its ambiguity. American Journal of Sociology, 74: p