Hasil Pre-Processing
π§© Alur Preprocessing (Sesuai Implementasi)
Dataset batch "Data Mentah MBG" dipilih. Berikut hasil setiap tahapan preprocessing per baris data.
Teks Asliβ
Cleaningβ
Case Foldingβ
Normalisasi (kamus)β
Tokenisasiβ
Stopword Removalβ
TF-IDFβ
Random Forest / KNN
Preprocessing diimplementasikan native di PHP (tanpa dependency eksternal):
β’ Cleaning β hapus URL, mention, hashtag, angka, tanda baca, dan karakter non-ASCII/emoji.
β’ Case Folding β ubah seluruh teks menjadi huruf kecil.
β’ Normalisasi β kamus kata tidak baku/singkatan (gkβtidak, ygβyang, dst.) dari tabel
β’ Stopword Removal β daftar stopword Bahasa Indonesia (
β’ TF-IDF β Random Forest / KNN β ekstraksi fitur lalu klasifikasi (menu Training Model).
Selanjutnya, data yang belum berlabel bisa diberi label otomatis di menu Pelabelan Data.
β’ Cleaning β hapus URL, mention, hashtag, angka, tanda baca, dan karakter non-ASCII/emoji.
β’ Case Folding β ubah seluruh teks menjadi huruf kecil.
β’ Normalisasi β kamus kata tidak baku/singkatan (gkβtidak, ygβyang, dst.) dari tabel
kamus_normalisasi.β’ Stopword Removal β daftar stopword Bahasa Indonesia (
StopwordList.php).β’ TF-IDF β Random Forest / KNN β ekstraksi fitur lalu klasifikasi (menu Training Model).
Selanjutnya, data yang belum berlabel bisa diberi label otomatis di menu Pelabelan Data.
1445 dari 1445 baris berhasil diproses β siap download.
| Teks Asli | Case Folding | Cleaning | Normalisasi | Tokenisasi | Stopword | Hasil Akhir | Label |
|---|---|---|---|---|---|---|---|
| dan RMT tidk semua murid dpt,hnya murid yang pendapatan keluarganya rendah sa... | dan rmt tidk semua murid dpt,hnya murid yang pendapatan keluarganya rendah sahaja yg dpt | dan rmt tidk semua murid dpthnya murid yang pendapatan keluarganya rendah sahaja yg dpt | dan rmt tidk semua murid dpthnya murid yang pendapatan keluarganya rendah sahaja yang dapat | dan rmt tidk semua murid dpthnya murid yang pendapatan keluarganya rendah sahaja yang dapat | rmt tidk semua murid dpthnya murid pendapatan keluarganya rendah sahaja | rmt tidk semua murid dpthnya murid pendapatan keluarganya rendah sahaja | netral |
| Aku penerima RMT Rancangan Makanan Tambahan. RMT adalah makanan yang terbaik. | aku penerima rmt rancangan makanan tambahan. rmt adalah makanan yang terbaik. | aku penerima rmt rancangan makanan tambahan rmt adalah makanan yang terbaik | aku penerima rmt rancangan makanan tambahan rmt adalah makanan yang terbaik | aku penerima rmt rancangan makanan tambahan rmt adalah makanan yang terbaik | aku penerima rmt rancangan makanan tambahan rmt makanan terbaik | aku penerima rmt rancangan makanan tambahan rmt makanan terbaik | positif |
| π‘π‘π‘π‘π‘π‘π‘π‘π‘π‘π‘π‘π‘ | π‘π‘π‘π‘π‘π‘π‘π‘π‘π‘π‘π‘π‘ | netral | |||||
| Tidak silap Aku RMT BERMULA tahun 1990. | tidak silap aku rmt bermula tahun 1990. | tidak silap aku rmt bermula tahun | tidak silap aku rmt bermula tahun | tidak silap aku rmt bermula tahun | silap aku rmt bermula tahun | silap aku rmt bermula tahun | negatif |
| Eh di sk batu 3 gk macam tu | eh di sk batu 3 gk macam tu | eh di sk batu gk macam tu | eh di suka batu tidak macam itu | eh di suka batu tidak macam itu | eh suka batu macam | eh suka batu macam | negatif |
| Sistematik bangat program makanan gratis siswa Malaysia... semua makanan bers... | sistematik bangat program makanan gratis siswa malaysia... semua makanan bersih, bergizi, halal(gak ada korupsi, makanan berkualitas di pantau/monitor ahli gizi | sistematik bangat program makanan gratis siswa malaysia semua makanan bersih bergizi halalgak ada korupsi makanan berkualitas di pantaumonitor ahli gizi | sistematik banget program makanan gratis siswa malaysia semua makanan bersih bergizi halalgak ada korupsi makanan berkualitas di pantaumonitor ahli gizi | sistematik banget program makanan gratis siswa malaysia semua makanan bersih bergizi halalgak ada korupsi makanan berkualitas di pantaumonitor ahli gizi | sistematik banget program makanan gratis siswa malaysia semua makanan bersih bergizi halalgak korupsi makanan berkualitas pantaumonitor ahli gizi | sistematik banget program makanan gratis siswa malaysia semua makanan bersih bergizi halalgak korupsi makanan berkualitas pantaumonitor ahli gizi | netral |
| Lama sudah kami tahu..πππ | lama sudah kami tahu..πππ | lama sudah kami tahu | lama sudah kami tahu | lama sudah kami tahu | lama tahu | lama tahu | negatif |
| Apapun itu Malaysia lebih maju dari indo | apapun itu malaysia lebih maju dari indo | apapun itu malaysia lebih maju dari indo | apapun itu malaysia lebih maju dari indonesia | apapun itu malaysia lebih maju dari indonesia | apapun malaysia lebih maju indonesia | apapun malaysia lebih maju indonesia | positif |
| Rindu zaman sekolah π’π’πsusu coklat best | rindu zaman sekolah π’π’πsusu coklat best | rindu zaman sekolah susu coklat best | rindu zaman sekolah susu coklat best | rindu zaman sekolah susu coklat best | rindu zaman sekolah susu coklat best | rindu zaman sekolah susu coklat best | negatif |
| Kerana indo poke Jokowi mending main pou | kerana indo poke jokowi mending main pou | kerana indo poke jokowi mending main pou | kerana indonesia poke jokowi mending main pou | kerana indonesia poke jokowi mending main pou | kerana indonesia poke jokowi mending main pou | kerana indonesia poke jokowi mending main pou | negatif |