Hasil Pre-Processing
π§© Alur Preprocessing (Sesuai Implementasi)
Dataset batch "Data Mentah MBG" dipilih. Berikut hasil setiap tahapan preprocessing per baris data.
Teks Asliβ
Cleaningβ
Case Foldingβ
Normalisasi (kamus)β
Tokenisasiβ
Stopword Removalβ
TF-IDFβ
Random Forest / KNN
Preprocessing diimplementasikan native di PHP (tanpa dependency eksternal):
β’ Cleaning β hapus URL, mention, hashtag, angka, tanda baca, dan karakter non-ASCII/emoji.
β’ Case Folding β ubah seluruh teks menjadi huruf kecil.
β’ Normalisasi β kamus kata tidak baku/singkatan (gkβtidak, ygβyang, dst.) dari tabel
β’ Stopword Removal β daftar stopword Bahasa Indonesia (
β’ TF-IDF β Random Forest / KNN β ekstraksi fitur lalu klasifikasi (menu Training Model).
Selanjutnya, data yang belum berlabel bisa diberi label otomatis di menu Pelabelan Data.
β’ Cleaning β hapus URL, mention, hashtag, angka, tanda baca, dan karakter non-ASCII/emoji.
β’ Case Folding β ubah seluruh teks menjadi huruf kecil.
β’ Normalisasi β kamus kata tidak baku/singkatan (gkβtidak, ygβyang, dst.) dari tabel
kamus_normalisasi.β’ Stopword Removal β daftar stopword Bahasa Indonesia (
StopwordList.php).β’ TF-IDF β Random Forest / KNN β ekstraksi fitur lalu klasifikasi (menu Training Model).
Selanjutnya, data yang belum berlabel bisa diberi label otomatis di menu Pelabelan Data.
1925 dari 1925 baris berhasil diproses β siap download.
| Teks Asli | Case Folding | Cleaning | Normalisasi | Tokenisasi | Stopword | Hasil Akhir | Label |
|---|---|---|---|---|---|---|---|
| Gak ada mbg, kebutuhan pangan harganya jadi lebih terjangkau. Klu gitu kasih ... | gak ada mbg, kebutuhan pangan harganya jadi lebih terjangkau. klu gitu kasih mkn nya 3 x, gak cukup cm sekali | gak ada mbg kebutuhan pangan harganya jadi lebih terjangkau klu gitu kasih mkn nya x gak cukup cm sekali | tidak ada mbg kebutuhan pangan harganya jadi lebih terjangkau kalau begitu kasih makin ya kali tidak cukup cuma sekali | tidak ada mbg kebutuhan pangan harganya jadi lebih terjangkau kalau begitu kasih makin ya kali tidak cukup cuma sekali | mbg kebutuhan pangan harganya jadi lebih terjangkau kalau kasih makin kali cukup cuma sekali | mbg kebutuhan pangan harganya jadi lebih terjangkau kalau kasih makin kali cukup cuma sekali | negatif |
| Tanya juga sidadan botak cair cair belum kebawahnyaπ π | tanya juga sidadan botak cair cair belum kebawahnyaπ π | tanya juga sidadan botak cair cair belum kebawahnya | tanya juga sidadan botak cair cair belum kebawahnya | tanya juga sidadan botak cair cair belum kebawahnya | tanya sidadan botak cair cair kebawahnya | tanya sidadan botak cair cair kebawahnya | negatif |
| mbg bukan masalah lapar orang yg berkecukupan juga dpt saran saya kasih sm yg... | mbg bukan masalah lapar orang yg berkecukupan juga dpt saran saya kasih sm yg layak menerimanya biar uang mbg gak mubajir terbuang | mbg bukan masalah lapar orang yg berkecukupan juga dpt saran saya kasih sm yg layak menerimanya biar uang mbg gak mubajir terbuang | mbg bukan masalah lapar orang yang berkecukupan juga dapat saran saya kasih sama yang layak menerimanya biar uang mbg tidak mubajir terbuang | mbg bukan masalah lapar orang yang berkecukupan juga dapat saran saya kasih sama yang layak menerimanya biar uang mbg tidak mubajir terbuang | mbg bukan masalah lapar orang berkecukupan saran kasih sama layak menerimanya biar uang mbg mubajir terbuang | mbg bukan masalah lapar orang berkecukupan saran kasih sama layak menerimanya biar uang mbg mubajir terbuang | negatif |
| Orang gila dijadiin presiden ya gini jafinya | orang gila dijadiin presiden ya gini jafinya | orang gila dijadiin presiden ya gini jafinya | orang gila dijadikan presiden ya begini jafinya | orang gila dijadikan presiden ya begini jafinya | orang gila dijadikan presiden begini jafinya | orang gila dijadikan presiden begini jafinya | negatif |
| Mbg dn programnya Uda oke tapi gak suka pdengan yng mengelolanya karena Uda b... | mbg dn programnya uda oke tapi gak suka pdengan yng mengelolanya karena uda banyak di k0rup51 | mbg dn programnya uda oke tapi gak suka pdengan yng mengelolanya karena uda banyak di krup | mbg dan programnya sudah oke tapi tidak suka pdengan yang mengelolanya karena sudah banyak di krup | mbg dan programnya sudah oke tapi tidak suka pdengan yang mengelolanya karena sudah banyak di krup | mbg programnya oke suka pdengan mengelolanya banyak krup | mbg programnya oke suka pdengan mengelolanya banyak krup | negatif |
| Yang membutuhkan MBG bukan rakyat tapi koruptor maling uang rakyat anak anak... | yang membutuhkan mbg bukan rakyat tapi koruptor maling uang rakyat anak anak tidak membutuhkan mbg | yang membutuhkan mbg bukan rakyat tapi koruptor maling uang rakyat anak anak tidak membutuhkan mbg | yang membutuhkan mbg bukan rakyat tapi koruptor maling uang rakyat anak anak tidak membutuhkan mbg | yang membutuhkan mbg bukan rakyat tapi koruptor maling uang rakyat anak anak tidak membutuhkan mbg | membutuhkan mbg bukan rakyat koruptor maling uang rakyat anak anak membutuhkan mbg | membutuhkan mbg bukan rakyat koruptor maling uang rakyat anak anak membutuhkan mbg | negatif |
| MBG diberikan hanya untuk siswa yang penghasilan orangtuanya dibawah umr saja. | mbg diberikan hanya untuk siswa yang penghasilan orangtuanya dibawah umr saja. | mbg diberikan hanya untuk siswa yang penghasilan orangtuanya dibawah umr saja | mbg diberikan hanya untuk siswa yang penghasilan orangtuanya dibawah umr saja | mbg diberikan hanya untuk siswa yang penghasilan orangtuanya dibawah umr saja | mbg diberikan siswa penghasilan orangtuanya dibawah umr | mbg diberikan siswa penghasilan orangtuanya dibawah umr | positif |
| Pidato kemana mana selalu yg di bahas MBG wakil nya pasti hilirisasi π | pidato kemana mana selalu yg di bahas mbg wakil nya pasti hilirisasi π | pidato kemana mana selalu yg di bahas mbg wakil nya pasti hilirisasi | pidato kemana mana selalu yang di bahas mbg wakil ya pasti hilirisasi | pidato kemana mana selalu yang di bahas mbg wakil ya pasti hilirisasi | pidato mana selalu bahas mbg wakil hilirisasi | pidato mana selalu bahas mbg wakil hilirisasi | positif |
| nanya ke petani π petani butuhnya pupuk nelayan butuhnya solar bkn mbg nanya... | nanya ke petani π petani butuhnya pupuk nelayan butuhnya solar bkn mbg nanya itu kepedagang keliling ke kantin2 sekolah mereka kena dampaknya apa lagi skg harga2 pada naik | nanya ke petani petani butuhnya pupuk nelayan butuhnya solar bkn mbg nanya itu kepedagang keliling ke kantin sekolah mereka kena dampaknya apa lagi skg harga pada naik | bertanya ke petani petani butuhnya pupuk nelayan butuhnya solar bukan mbg bertanya itu kepedagang keliling ke kantin sekolah mereka kena dampaknya apa lagi sekarang harga pada naik | bertanya ke petani petani butuhnya pupuk nelayan butuhnya solar bukan mbg bertanya itu kepedagang keliling ke kantin sekolah mereka kena dampaknya apa lagi sekarang harga pada naik | bertanya petani petani butuhnya pupuk nelayan butuhnya solar bukan mbg bertanya kepedagang keliling kantin sekolah kena dampaknya apa sekarang harga naik | bertanya petani petani butuhnya pupuk nelayan butuhnya solar bukan mbg bertanya kepedagang keliling kantin sekolah kena dampaknya apa sekarang harga naik | positif |
| Dulu saya di ajari org tua tirakat ngurangi makan biar pikiran bersih skr bow... | dulu saya di ajari org tua tirakat ngurangi makan biar pikiran bersih skr bowo malah nyuruh makan biar hbis makan siswa ngantuk sekolah | dulu saya di ajari org tua tirakat ngurangi makan biar pikiran bersih skr bowo malah nyuruh makan biar hbis makan siswa ngantuk sekolah | dulu saya di ajari orang tua tirakat ngurangi makan biar pikiran bersih sekarang bowo malah nyuruh makan biar habis makan siswa ngantuk sekolah | dulu saya di ajari orang tua tirakat ngurangi makan biar pikiran bersih sekarang bowo malah nyuruh makan biar habis makan siswa ngantuk sekolah | dulu ajari orang tua tirakat ngurangi makan biar pikiran bersih sekarang bowo malah nyuruh makan biar habis makan siswa ngantuk sekolah | dulu ajari orang tua tirakat ngurangi makan biar pikiran bersih sekarang bowo malah nyuruh makan biar habis makan siswa ngantuk sekolah | negatif |