Lingkungan Pengembangan Data Mining HASIL DAN PEMBAHASAN Preprocessing Data

Transkripsi

1 Setelah dilakukan analisis clustering maka algoritme tersebut akan dibandingkan berdasarkan cluster yang terbentuk dari hasil analisis cluster-nya. Hasil perbandingan diharapkan dapat membuktikan bahwa algoritme QROCK lebih baik dari ROCK. Lingkungan Pengembangan Aplikasi ini dibangun dengan menggunakan perangkat keras dan lunak dengan spesifikasi sebagai berikut : Perangkat keras : Processor Intel Pentium 4 RAM 512 MB DDR 1 HDD 80 GB Monitor 14 Mouse dan keyboard Perangkat lunak : Sistem operasi Windows XP SP 2 Bahasa Pemrograman Matlab 7 Microsoft Excel 2007 HASIL DAN PEMBAHASAN Preprocessing Data Data yang digunakan pada penelitian ini adalah data bunga karang atau sponge jenis O.Hadromerida (Demospongiae. Porifera) yang terdapat di Lautan Atlantik. Data diperoleh dari hasil penelitian Iosune Uriz dan Marta Domingo pada tahun Data ini memiliki 76 record dan 45 atribut. Format awal data adalah format txt. Tahap praproses data dilakukan terhadap data bunga karang meliputi: 1 Data selection Pada proses ini dilakukan dua tahapan : a b Seleksi record. Dari 76 record data terdapat 22 missing data pada atribut ke 39, oleh karena itu diperlukan pemilihan record yang sesuai sehingga data yang hilang tidak mempengaruhi hasil. Pada penelitian ini seleksi record dilakukan dengan cara membuang 22 record missing data, sehingga dihasilkan 54 record data. Data sponge tersebut dapat dilihat pada Lampiran 1. Seleksi atribut. Dalam data yang digunakan terdapat 45 atribut yang terdiri dari 27 atribut non-numerik, 15 atribut boolean, dan tiga atribut numeric. Karena tiga atribut numeric dalam bentuk bilangan diskret maka diasumsikan bahwa nilai dari atribut tersebut merupakan hasil pengamatan yang didiskretkan sehingga dapat dijadikan kategori. Oleh karena semua atribut yang ada berhubungan dengan struktur anatomi dan fisiologi dari bunga karang maka semua atribut digunakan dalam proses data mining. Atribut yang digunakan dapat dilihat pada Lampiran 2. 2 Data transformation Pada tahapan proses ini dilakukan tranformasi data dari format.txt ke format.xls agar dapat diproses dengan mudah oleh MATLAB. Kemudian dilakukan inisialisasi untuk setiap data kedalam bentuk integer untuk mempermudah proses perhitungan similaritas. Data Mining Pada tahap ini dilakukan clustering menggunakan langkah-langkah dari algoritme ROCK dan QROCK. Pada langkah pertama akan dilakukan proses clustering menggunakan algoritme ROCK. Percobaan clustering dilakukan untuk ukuran cluster dua sampai 13 (k = 2 13). Untuk masing masing ukuran cluster dilakukan percobaan dengan nilai threshold diambil pada selang 0 sampai 1 (0:0.1:1). hasil ditentukan sedemikian sehingga cluster hasil memiliki nilai cohesion yang tinggi dan telah merepresentasikan pola anatomi dari sponge. yang dihasilkan oleh algoritme ROCK berjumlah tujuh cluster dengan nilai threshold 0.6. Hasil algortme ROCK tersebut disajikan pada Tabel 1. Tabel 1 hasil algoritme ROCK untuk ukuran k = 7 dan = 0,6 Anggota 1 [ ] 2 [ ] 3 [ ] 4 [ ] 5 [ ] 6 [ ] 7 [ ] Persentase dan jumlah anggota masingmasing cluster algoritme ROCK dengan ukuran k = 7 dan threshold = 0,6 disajikan dalam Tabel 2. 8

2 Tabel 2 Persentase dan jumlah anggota cluster algoritme ROCK untuk ukuran k = 7 dan = 0,6 anggota Persentase (%) Pola anatomi yang direpresentasikan dari cluster hasil algoritme ROCK yaitu : 1 Anggota cluster satu merupakan sponge yang tidak memiliki bagian dalam cortex, tidak memiliki espicula, megasclera tipe satu dan warnanya selain warna biru, kuning dan orange permukaan halus. 2 Anggota cluster dua merupakan sponge yang memiliki cortex, tidak memiliki tipe espicula, megasclera tipe tiga, dan bentuk lapisan permukaannya keras. 3 tiga merupakan sponge yang tidak memiliki cortex, tidak memiliki espicula, megasclera tipe satu, berwarna kuning dan lapisan permukaan kasar. 4 Anggota cluster empat merupakan sponge yang tidak memiliki cortex, tidak memiliki espicula, megasclera tipe satu dan dua, berwarna kuning, selain biru dan orange, memiliki lapisan permukaan halus namun keras. 5 lima merupakan sponge yang memiliki cortex, memiliki espicula, megasclera tipe tiga dan satu, warnanya selain warna biru dan orange, bentuk lapisan permukaannya beragam dan keras. 6 enam merupakan sponge yang tidak memiliki cortex, tidak memiliki espicula, megasclera tipe satu, dua, dan tiga, berwarna kuning, selain biru dan orange, memiliki lapisan permukaan halus dan kasar serta keras. 7 tujuh merupakan sponge yang memiliki cortex, tidak memiliki espicula dan memiliki espicula, megasclera tipe satu, dua, dan tiga, berwarna kuning, selain biru dan orange, memiliki permukaan yang keras. Pada percobaan untuk algoritme QROCK tidak diperlukan penentuan ukuran cluster karena ukuran cluster akan dibangkitkan otomatis oleh algoritme QROCK. Pada algoritme ini hanya diperlukan masukan data dan nilai threshold. Nilai threshold pada percobaan ini diambil pada selang 0 sampai dengan 1 (0:0.05:1). Percobaan clustering dilakukan dengan memasukan nilai threshold yang bervariasi hingga menghasilkan cluster yang memiliki nilai cohesion yang tinggi dan telah merepresentasikan pola anatomi dari sponge. yang dihasilkan oleh algoritme QROCK berjumlah enam cluster dengan nilai threshold Hasil algoritme QROCK tersebut disajikan pada Tabel 3. Tabel 3 yang dihasilkan oleh algoritme QROCK pada ukuran k = 6 dan = 0,85 Anggota 1 [1] [ ] 3 [10] [ ] 5 [42 43] 6 [46 47] Persentase dan jumlah anggota masingmasing cluster algoritme QROCK pada ukuran k = 6 dan threshold = 0,85 disajikan dalam Tabel 4. Tabel 4 Persentase dan jumlah anggota cluster algoritme QROCK pada ukuran k = 6 dan = 0,85 anggota Persentase (%)

3 Pola anatomi yang direpresentasikan dari cluster hasil algoritme QROCK yaitu : 1 Anggota cluster satu merupakan sponge yang memiliki cortex, tidak ada espicula, megasclera tipe satu, warna selain kuning, biru dan orange, permukaannya kasar. 2 dua sponge yang memiliki cortex, megascleras tipe satu dan dua, tidak memiliki espicula, warna kuning dan selain biru dan orange, permukaan halus dan keras. 3 Anggota cluster tiga sponge yang memiliki cortex dan espicula, megasclera tipe tiga, permukaannya halus dan warnanya kuning. 4 empat sponge yang memiliki cortex dan tidak memiliki espicula, megasclera tipe tiga, warna selain kuning, biru dan orange, permukaan halus tapi keras. 5 lima sponge yang tidak memiliki cortex namun memiliki espicula, megasclera tipe tiga, warna kuning, lapisan permukaan halus dan kasar. 6 enam merupakan sponge yang memiliki cortex dan tidak memiliki espicula, tidak memiliki megasclera, warna selain kuning, biru dan orange, permukaannya berbentuk poligon besar dan kasar. Pada kasus algoritme ROCK yang membutuhkan dua parameter ukuran cluster dan nilai threshold, algoritme berhenti setelah mendapatkan k cluster yang ditentukan maka k > untuk nilai threshold. tambahan ( buah) tidak lain merupakan calon anggota cluster, namun karena nilai k terpenuhi maka proses merge tidak sempat dikerjakan. Selain itu, kondisi data dalam jumlah besar dan kemungkinan memiliki outliers sangat sulit untuk menentukan nilai k. Algoritme QROCK lebih mudah dan natural karena tidak harus menentukan ukuran k dibandingkan algoritme ROCK. Evaluasi Pola Hasil clustering dari setiap kombinasi ukuran cluster dan nilai threshold dievaluasi menggunakan total cohesion dengan menggunakan persamaan (7) dan nilai separation dengan menggunakan persamaan (8). Nilai total cohesion untuk clustering algoritme ROCK disajikan pada Lampiran 3. Pada algoritme ROCK pola anatomi sponge dapat direpresentasikan setelah ukuran cluster tujuh. Pada tabel di Lampiran 3 dapat terlihat bahwa untuk ukuran cluster tujuh dengan nilai cohesion yang paling tinggi terdapat pada nilai threshold 0.6, maka cluster yang dipilih untuk algoritme ROCK adalah ukuran cluster tujuh dengan = 0.6. Nilai cohesion dan nilai separation untuk cluster tujuh dan = 0.6 tersebut disajikan pada Tabel 5. Tabel 5 Nilai cohesion dan nilai separation algoritme ROCK untuk cluster delapan dan = 0.7 Anggota Cohesion Separation , , Nilai total cohesion untuk clustering dari setiap kombinasi nilai threshold bagi algoritme QROCK disajikan pada Lampiran 4. Pada algoritme QROCK pola anatomi sponge dapat direpresentasikan pada ukuran cluster enam. Pada tabel di Lampiran 4 dapat dilihat bahwa untuk nilai (threshold) = 0.85 total cohesion memiliki nilai cohesion yang tinggi dibandingkan dengan cluster sembilan yang dihasilkan oleh nilai threshold = 0.87, maka cluster yang dipilih untuk algoritme QROCK adalah cluster ukuran enam dengan = Nilai cohesion dan nilai separation untuk ukuran cluster enam dan = 0.85 tersebut disajikan pada Tabel 6. 10

4 Tabel 6 Nilai cohesion dan nilai separation algoritme QROCK untuk cluster enam dan = 0.85 anggota Cohesion Separation Semakin besar nilai cohesion (intracluster) menunjukkan kemiripan (similaritas) objek-objek tersebut semakin besar (Mali & Mitra, 1998). Semakin kecil nilai separation yang menggunakan persamaan similaritas maka perbedaan atau jarak suatu cluster dengan cluster lainnya semakin besar (Tan et al. 2006). Dengan demikian suatu cluster dikatakan baik jika nilai cohesion lebih besar dari nilai separation-nya. Dari Tabel 5 dapat dilihat bahwa algoritme ROCK memiliki nilai total cohesion 7.498,6 dan nilai separation Nilai separation lebih besar dibandingkan nilai cohesion-nya. Sedangkan dari Tabel 6 terlihat bahwa algoritme QROCK memili ki nilai cohesion ,3 dan nilai total separation 0. Nilai separation algoritme QROCK lebih kecil dibandingkan nilai cohesion-nya. Dengan demikian berdasarkan hasil penelitian ini, cluster yang dihasilkan algoritme QROCK lebih baik dibandingkan cluster yang dihasilkan algoritme ROCK. Ukuran dan Nilai Cohesion Nilai cohesion menentukan kualitas suatu cluster sementara ukuran cluster menentukan nilai total cohesion. Nilai cohesion menentukan kualitas suatu cluster karena dengan semakin tinggi nilai cohesion maka semakin baik kualitas suatu cluster. Ukuran cluster menentukan nilai total cohesion karena semakin banyak cluster yang terbentuk maka semakin sedikit anggota suatu cluster dan semakin sedikit pula nilai total cohesion-nya. Hubungan antar ukuran cluster dan nilai cohesion pada algoritme ROCK dapat dilihat pada Lampiran 3. Nilai total cohesion dan ukuran cluster pada nilai threshold 0.7 untuk algoritme ROCK dapat dilihat pada Tabel 7. Tabel 7 Nilai total cohesion dan ukuran cluster algoritme ROCK pada nilai threshold 0.6 Threshold Berdasarkan Tabel 7 dapat dilihat grafik nilai k terhadap nilai total cohesion pada Gambar 4. Gambar 4 Grafik nilai cohesion terhadap nilai k pada algoritme ROCK. Nilai total cohesion dan ukuran cluster pada algoritme QROCK dapat dilihat pada Lampiran 4. Nilai k terhadap total cohesion dari Lampiran 4 diplotkan pada grafik dalam Gambar 5. 11

5 kumpulan cluster sebagai sekumpulan komponen graf L (M.Dutta et al. 2005). Misalkan adalah jumlah cluster akhir graf L berdasarkan. Nilai dapat diambil pada rentang 0 sampai dengan 1, sedemikian sehingga nilai konstan. Sehingga jika maka nbrlist dari nbrlist, jumlah anggota cluster jumlah anggota Gambar 5 Grafik nilai cohesion terhadap nilai k pada algoritme QROCK. Dari grafik Gambar 4 dan 5 dapat disimpulkan bahwa semakin besar jumlah k maka semakin kecil nilai total cohesion-nya, hal ini disebabkan semakin banyak cluster mengakibatkan jumlah anggota suatu cluster semakin sedikit sehingga menyebabkan nilai total cohesion menjadi kecil. Perbandingan nilai cohesion terhadap ukuran cluster antara algoritme ROCK dan QROCK dapat dilihat pada Gambar 6. Gambar 6 Perbandingan nilai cohesion terhadap ukuran cluster untuk ROCK dan QROCK. Pada algoritme QROCK menurunnya nilai cohesion lebih dipengaruhi oleh nilai threshold dibandingkan oleh ukuran cluster karena ukuran clusternya ditentukan secara otomatis oleh algoritme QROCK berdasarkan nilai threshold yang ditentukan. cluster, cluster cluster (M.Dutta et al. 2005). Hubungan antar nilai threshold dan nilai cohesion pada algoritme ROCK dapat dilihat pada Tabel 8. Tabel 8 Hubungan antar nilai threshold dan nilai cohesion pada algoritme ROCK pada ukuran cluster tujuh Threshold Berdasarkan Tabel 8 dapat digambarkan grafik hubungan nilai threshold terhadap nilai total cohesion pada Gambar 7. Nilai Threshold dan Nilai Cohesion Nilai threshold pada algoritme ROCK menentukan kepadatan dari graf L (graf yang dibangkitkan oleh algoritme ROCK), sehingga menentukan hasil akhir algoritme ROCK. Pada saat nilai k tidak diberikan, algoritme ROCK akan berhenti secara otomatis dengan 12

6 Gambar 7 Grafik nilai threshold terhadap nilai cohesion pada algoritme ROCK. Pada algoritme QROCK, cluster akhir hanya ditentukan oleh nilai threshold sehingga proses algoritme dapat berhenti secara natural (M.Dutta et al 2005). Nilai total cohesion dan ukuran cluster pada algoritme QROCK dapat dilihat pada Lampiran 4. Nilai k terhadap total cohesion dari Lampiran 4 digambarkan pada grafik dalam Gambar 8. Gambar 8 Grafik nilai threshold terhadap nilai cohesion pada algoritme QROCK. Dari grafik Gambar 7 dan 8 dapat disimpulkan bahwa semakin besar nilai threshold maka semakin kecil nilai total cohesion-nya ini dikarenakan nilai nbrlist semakin kecil mengakibatkan jumlah anggota suatu cluster semakin sedikit sehingga menyebabkan nilai total cohesion menjadi kecil. Perbandingan nilai cohesion terhadap nilai threshold antara algoritme ROCK dan QROCK dapat dilihat pada Gambar 9. Gambar 9 Perbandingan nilai cohesion terhadap nilai threshold untuk ROCK dan QROCK. Mendeteksi Outlier Algoritme ROCK akan berhenti ketika : jumlah cluster yang diharapkan terpenuhi atau tidak ada lagi link diantara cluster-cluster-nya. Pada suatu kasus algoritme ROCK berhenti ketika tidak ada lagi link antar cluster-nya dikarenakan sudah tidak memiliki link yang tidak nol antara mereka, namun ketika kasus yang sama diproses oleh algoritme QROCK ternyata masih memiliki link antar clusternya. Teorema 1 : Jika cluster akhir hasil algoritme ROCK sudah tidak memiliki link yang tidak nol antara mereka maka cluster tersebut tidak lain adalah sebuah link graf L yang komponenkomponennya saling berhubung (M.Dutta et al. 2005). Pembuktian dari teorema tersebut ada dua yaitu : 1 Jika algoritme ROCK berhenti karena tidak ada lagi link yang tidak nol (global heap semuanya nol proses algoritme ROCK berhenti), maka cluster yang terbentuk merupakan komponen terhubung dari graf L. 2 Komponen terhubung tersebut sebenarnya adalah cluster itu sendiri yang merupakan hasil algoritme ROCK (M.Dutta et al. 2005). Pembuktian pertama terjadi pada saat nilai threshold 0.9 untuk kombinasi ukuran cluster dua sampai dengan 13 cluster yang terbentuk sebanyak 23 cluster. Hal tersebut dikarenakan tidak ada lagi link yang tidak nol maka algoritme ROCK menghasilkan secara otomatis 23 cluster. Pada algoritme QROCK 13

7 ketika nilai threshold 0.9 cluster yang terbentuk adalah 19 cluster, dimana data ke 14 masih dapat digabung dengan data ke 19, data ke 42 digabung dengan data ke 43, data ke 46 masih bisa digabung dengan data ke 47, dan data ke 18 digabung dengan data ke 27. Dari hasil penelitian tersebut terbukti bahwa algoritme QROCK dapat mendeteksi outlier pada algoritme ROCK. Perbandingan hasil cluster algoritme ROCK dan QROCK pada nilai threshold 0.9 dapat dilihat pada Lampiran 5. KESIMPULAN DAN SARAN Kesimpulan Pada penelitian ini dilakukan proses clustering menggunakan algoritme ROCK dan QROCK untuk data bunga karang (sponge). Percobaan clustering untuk algoritme ROCK dilakukan untuk ukuran cluster dua sampai 13 (k = 1 13) untuk masing masing ukuran cluster dilakukan percobaan dengan nilai threshold diambil pada selang 0 sampai 1 (0:0,1:1). Pada algoritme QROCK ukuran cluster akan dibangkitkan otomatis oleh algoritmenya, algoritme QROCK hanya membutuhkan nilai threshold untuk menghasilkan cluster. Percobaan cluster pada algoritme QROCK dilakukan berdasarkan variasi nilai threshold pada selang 0 sampai 1 (0:0,05:1). Algoritme QROCK terbukti lebih mudah dibandingkan algoritme ROCK karena tidak perlu menentukan ukuran dari cluster. Dari percobaan diperoleh hasil clustering terbaik untuk algoritme ROCK adalah clustering dengan ukuran cluster tujuh dan nilai threshold 0.6, memiliki nilai total cohesion 7.498,6 dan nilai separation ing terbaik untuk algoritme QROCK yaitu cluster berukuran enam dan nilai threshold Nilai total cohesion ,3 dan nilai total separation 0. Dilihat dari nilai cohesion dan separation algoritme ROCK memiliki nilai cohesion lebih kecil dibandingkan nilai separationnya. Sedangkan untuk algoritme QROCK nilai cohesion lebih besar dari pada nilai separationnya. Dengan demikian dapat disimpulkan algoritme QROCK lebih baik dibandingkan algoritme ROCK. Pada percobaan untuk nilai threshold 0.9 algoritme ROCK menghasilkan 23 cluster karena sudah tidak ada lagi nilai link yang tak nol, sedangkan pada algoritme QROCK dengan nilai threshold 0.9 dihasilkan 19 cluster. Dengan demikian dapat disimpulkan bahwa algoritme QROCK dapat mendeteksi outlier pada algoritme ROCK. Algoritme ROCK dan QROCK dapat digunakan untuk data kategorik, namun menurut hasil dari penelitian ini algoritme QROCK lebih baik dari pada algoritme ROCK. Saran Penelitian ini dapat dilanjutkan dengan menentukan klasifikasi taksonomi dari data sponge dari cluster-cluster yang telah dihasilkan. Perbandingan hasil clustering algoritme QROCK dapat dilakukan dengan algoritme lain yang berbeda base misal algoritme conceptual clustering yaitu COWEB dan ITERATE, sehingga dari perbandingan tersebut dapat diketahui algoritme mana yang lebih efektif digunakan untuk data kategorik. DAFTAR PUSTAKA Goharian & Grossman Introduction to Data Mining. Slide/DM-Introduction.pdf. [Juni 2008]. Guha S, Rajeev R, & Kyuseok S ROCK: A Robust ing Algorithm for Categorical Attributes. Proceedings of the IEEE International Conference on Data Engineering, Sydney, Maret Han J dan Kamber M Data Mining Concepts and Techniques Edisi Ke-2. San Francisco: Morgan Kaufmann Publisher. Huntsbergen Elemen of Statistical Inference. Edisi Ke-6. New York : Allyn and Balon, Inc. Kantardzic M Data Mining: Concepts, Model, Methods, and Algorithm. New Jersey: John Wiley & Sons inc. Mali K, Mitra S ing Validation In A Symbolic Framework. AG E/Fast.ing.pdf. [juli 2008]. M.Dutta, A.Kakoti M & Arun K QROCK : A Quick Version of the ROCK Algorithm for ing of Categorical Data. Proceedings of the 14