Hasil Pre-Processing
π§© Alur Preprocessing (Sesuai Implementasi)
Dataset batch "Data Mentah MBG" dipilih. Berikut hasil setiap tahapan preprocessing per baris data.
Teks Asliβ
Cleaningβ
Case Foldingβ
Normalisasi (kamus)β
Tokenisasiβ
Stopword Removalβ
TF-IDFβ
Random Forest / KNN
Preprocessing diimplementasikan native di PHP (tanpa dependency eksternal):
β’ Cleaning β hapus URL, mention, hashtag, angka, tanda baca, dan karakter non-ASCII/emoji.
β’ Case Folding β ubah seluruh teks menjadi huruf kecil.
β’ Normalisasi β kamus kata tidak baku/singkatan (gkβtidak, ygβyang, dst.) dari tabel
β’ Stopword Removal β daftar stopword Bahasa Indonesia (
β’ TF-IDF β Random Forest / KNN β ekstraksi fitur lalu klasifikasi (menu Training Model).
Selanjutnya, data yang belum berlabel bisa diberi label otomatis di menu Pelabelan Data.
β’ Cleaning β hapus URL, mention, hashtag, angka, tanda baca, dan karakter non-ASCII/emoji.
β’ Case Folding β ubah seluruh teks menjadi huruf kecil.
β’ Normalisasi β kamus kata tidak baku/singkatan (gkβtidak, ygβyang, dst.) dari tabel
kamus_normalisasi.β’ Stopword Removal β daftar stopword Bahasa Indonesia (
StopwordList.php).β’ TF-IDF β Random Forest / KNN β ekstraksi fitur lalu klasifikasi (menu Training Model).
Selanjutnya, data yang belum berlabel bisa diberi label otomatis di menu Pelabelan Data.
4958 dari 4958 baris berhasil diproses β siap download.
| Teks Asli | Case Folding | Cleaning | Normalisasi | Tokenisasi | Stopword | Hasil Akhir | Label |
|---|---|---|---|---|---|---|---|
| Kenapa mesti pake keju? | kenapa mesti pake keju? | kenapa mesti pake keju | kenapa mesti pakai keju | kenapa mesti pakai keju | mesti pakai keju | mesti pakai keju | negatif |
| Udah mbg d berhentikan aja stop y | udah mbg d berhentikan aja stop y | udah mbg d berhentikan aja stop y | sudah mbg di berhentikan saja stop ya | sudah mbg di berhentikan saja stop ya | mbg berhentikan stop | mbg berhentikan stop | negatif |
| Gulung aja mau TNI KEK MAU POLISI SIKAT MEREKA PENGKIANAT BANGSA TAK pantas d... | gulung aja mau tni kek mau polisi sikat mereka pengkianat bangsa tak pantas di hormati | gulung aja mau tni kek mau polisi sikat mereka pengkianat bangsa tak pantas di hormati | gulung saja mau tni kayak mau polisi sikat mereka pengkianat bangsa tak pantas di hormati | gulung saja mau tni kayak mau polisi sikat mereka pengkianat bangsa tak pantas di hormati | gulung mau tni mau polisi sikat pengkianat bangsa tak pantas hormati | gulung mau tni mau polisi sikat pengkianat bangsa tak pantas hormati | negatif |
| πππ ini hasil pelatihan militer | πππ ini hasil pelatihan militer | ini hasil pelatihan militer | ini hasil pelatihan militer | ini hasil pelatihan militer | hasil pelatihan militer | hasil pelatihan militer | positif |
| Alhamdulillah terima kasih Yaa Rabb π€² | alhamdulillah terima kasih yaa rabb π€² | alhamdulillah terima kasih yaa rabb | alhamdulillah terima kasih ya rabb | alhamdulillah terima kasih ya rabb | alhamdulillah terima kasih rabb | alhamdulillah terima kasih rabb | positif |
| Indonesia di penuhi para MALING,siapapun mereka,tetap di proses hukum,dasar r... | indonesia di penuhi para maling,siapapun mereka,tetap di proses hukum,dasar rakus. | indonesia di penuhi para malingsiapapun merekatetap di proses hukumdasar rakus | indonesia di penuhi para malingsiapapun merekatetap di proses hukumdasar rakus | indonesia di penuhi para malingsiapapun merekatetap di proses hukumdasar rakus | indonesia penuhi malingsiapapun merekatetap proses hukumdasar rakus | indonesia penuhi malingsiapapun merekatetap proses hukumdasar rakus | positif |
| Jgn jgn salah satu materi retret ada itu nya..? | jgn jgn salah satu materi retret ada itu nya..? | jgn jgn salah satu materi retret ada itu nya | jangan jangan salah satu materi retret ada itu ya | jangan jangan salah satu materi retret ada itu ya | jangan jangan salah satu materi retret | jangan jangan salah satu materi retret | negatif |
| Yg bs korup ya umum ny pejabat...g aneh dn g kaget | yg bs korup ya umum ny pejabat...g aneh dn g kaget | yg bs korup ya umum ny pejabatg aneh dn g kaget | yang bisa korup ya umum nya pejabatg aneh dan tidak kaget | yang bisa korup ya umum nya pejabatg aneh dan tidak kaget | korup umum pejabatg aneh kaget | korup umum pejabatg aneh kaget | negatif |
| STOP/TUTUP MBG yg paling tepat, kalo mau utk daerah 3 T dan yg membutuhkan | stop/tutup mbg yg paling tepat, kalo mau utk daerah 3 t dan yg membutuhkan | stoptutup mbg yg paling tepat kalo mau utk daerah t dan yg membutuhkan | stoptutup mbg yang paling tepat kalau mau untuk daerah t dan yang membutuhkan | stoptutup mbg yang paling tepat kalau mau untuk daerah t dan yang membutuhkan | stoptutup mbg paling tepat kalau mau daerah t membutuhkan | stoptutup mbg paling tepat kalau mau daerah t membutuhkan | negatif |
| sudah gak aneh hal kayak gitu di konoha | sudah gak aneh hal kayak gitu di konoha | sudah gak aneh hal kayak gitu di konoha | sudah tidak aneh hal kayak begitu di konoha | sudah tidak aneh hal kayak begitu di konoha | aneh konoha | aneh konoha | negatif |