Hasil Pre-Processing
🧩 Alur Preprocessing (Sesuai Implementasi)
Dataset batch "Data Mentah MBG" dipilih. Berikut hasil setiap tahapan preprocessing per baris data.
Teks Asli→
Cleaning→
Case Folding→
Normalisasi (kamus)→
Tokenisasi→
Stopword Removal→
TF-IDF→
Random Forest / KNN
Preprocessing diimplementasikan native di PHP (tanpa dependency eksternal):
• Cleaning — hapus URL, mention, hashtag, angka, tanda baca, dan karakter non-ASCII/emoji.
• Case Folding — ubah seluruh teks menjadi huruf kecil.
• Normalisasi — kamus kata tidak baku/singkatan (gk→tidak, yg→yang, dst.) dari tabel
• Stopword Removal — daftar stopword Bahasa Indonesia (
• TF-IDF → Random Forest / KNN — ekstraksi fitur lalu klasifikasi (menu Training Model).
Selanjutnya, data yang belum berlabel bisa diberi label otomatis di menu Pelabelan Data.
• Cleaning — hapus URL, mention, hashtag, angka, tanda baca, dan karakter non-ASCII/emoji.
• Case Folding — ubah seluruh teks menjadi huruf kecil.
• Normalisasi — kamus kata tidak baku/singkatan (gk→tidak, yg→yang, dst.) dari tabel
kamus_normalisasi.• Stopword Removal — daftar stopword Bahasa Indonesia (
StopwordList.php).• TF-IDF → Random Forest / KNN — ekstraksi fitur lalu klasifikasi (menu Training Model).
Selanjutnya, data yang belum berlabel bisa diberi label otomatis di menu Pelabelan Data.
5119 dari 5119 baris berhasil diproses — siap download.
| Teks Asli | Case Folding | Cleaning | Normalisasi | Tokenisasi | Stopword | Hasil Akhir | Label |
|---|---|---|---|---|---|---|---|
| Tunjukkan tersangkanya jgn ditutup tutupi biar rakyat bisa melihat | tunjukkan tersangkanya jgn ditutup tutupi biar rakyat bisa melihat | tunjukkan tersangkanya jgn ditutup tutupi biar rakyat bisa melihat | tunjukkan tersangkanya jangan ditutup tutupi biar rakyat bisa melihat | tunjukkan tersangkanya jangan ditutup tutupi biar rakyat bisa melihat | tunjukkan tersangkanya jangan ditutup tutupi biar rakyat melihat | tunjukkan tersangkanya jangan ditutup tutupi biar rakyat melihat | negatif |
| Jzbsjhxbxjsb bjshshejwwjx0w9drif8s0idjdks0skfnxknedjcjdndudfjbdihfjdisjnfixnj... | jzbsjhxbxjsb bjshshejwwjx0w9drif8s0idjdks0skfnxknedjcjdndudfjbdihfjdisjnfixnj❤1😅😂😅😮🎉😅❤😅🎉🎉😅🎉jdhnxj ncn😅❤😅🎉😮😂ncncjxn | jzbsjhxbxjsb bjshshejwwjxwdrifsidjdksskfnxknedjcjdndudfjbdihfjdisjnfixnjjdhnxj ncnncncjxn | jzbsjhxbxjsb bjshshejwwjxwdrifsidjdksskfnxknedjcjdndudfjbdihfjdisjnfixnjjdhnxj ncnncncjxn | jzbsjhxbxjsb bjshshejwwjxwdrifsidjdksskfnxknedjcjdndudfjbdihfjdisjnfixnjjdhnxj ncnncncjxn | jzbsjhxbxjsb bjshshejwwjxwdrifsidjdksskfnxknedjcjdndudfjbdihfjdisjnfixnjjdhnxj ncnncncjxn | jzbsjhxbxjsb bjshshejwwjxwdrifsidjdksskfnxknedjcjdndudfjbdihfjdisjnfixnjjdhnxj ncnncncjxn | netral |
| Fturgir urgirryri | fturgir urgirryri | fturgir urgirryri | fturgir urgirryri | fturgir urgirryri | fturgir urgirryri | fturgir urgirryri | netral |
| Aku mau bakso mie ayam chicken bakso 2 kasih jangan lagi semangka tong ayam b... | aku mau bakso mie ayam chicken bakso 2 kasih jangan lagi semangka tong ayam bakso sosis | aku mau bakso mie ayam chicken bakso kasih jangan lagi semangka tong ayam bakso sosis | aku mau bakso mie ayam chicken bakso kasih jangan lagi semangka tong ayam bakso sosis | aku mau bakso mie ayam chicken bakso kasih jangan lagi semangka tong ayam bakso sosis | aku mau bakso mie ayam chicken bakso kasih jangan semangka tong ayam bakso sosis | aku mau bakso mie ayam chicken bakso kasih jangan semangka tong ayam bakso sosis | negatif |
| HP Android aku mau mbg sama chicken sama mie ayam sama sosis sama chicken | hp android aku mau mbg sama chicken sama mie ayam sama sosis sama chicken | hp android aku mau mbg sama chicken sama mie ayam sama sosis sama chicken | hp android aku mau mbg sama chicken sama mie ayam sama sosis sama chicken | hp android aku mau mbg sama chicken sama mie ayam sama sosis sama chicken | hp android aku mau mbg sama chicken sama mie ayam sama sosis sama chicken | hp android aku mau mbg sama chicken sama mie ayam sama sosis sama chicken | positif |
| Dffggffjhhhjgjgjj Dcgcbnfrdwfbvbbvk Bhbbghghbbnbnbbbbb Dgghnbbbhbbnnbnbnbbh | dffggffjhhhjgjgjj dcgcbnfrdwfbvbbvk bhbbghghbbnbnbbbbb dgghnbbbhbbnnbnbnbbh | dffggffjhhjgjgjj dcgcbnfrdwfbvbbvk bhbbghghbbnbnbb dgghnbbhbbnnbnbnbbh | dffggffjhhjgjgjj dcgcbnfrdwfbvbbvk bhbbghghbbnbnbb dgghnbbhbbnnbnbnbbh | dffggffjhhjgjgjj dcgcbnfrdwfbvbbvk bhbbghghbbnbnbb dgghnbbhbbnnbnbnbbh | dffggffjhhjgjgjj dcgcbnfrdwfbvbbvk bhbbghghbbnbnbb dgghnbbhbbnnbnbnbbh | dffggffjhhjgjgjj dcgcbnfrdwfbvbbvk bhbbghghbbnbnbb dgghnbbhbbnnbnbnbbh | netral |
| akulaper | akulaper | akulaper | akulaper | akulaper | akulaper | akulaper | netral |
| Hnii | hnii | hnii | hnii | hnii | hnii | hnii | netral |
| Fd geheueyus free | fd geheueyus free | fd geheueyus free | fd geheueyus free | fd geheueyus free | fd geheueyus free | fd geheueyus free | positif |
| Dsfgsgrhsdjdgdhdjdggdjd Fsgsgshdhdhrgrdhejgdh Fsgshdhdhrhrhrgrhd Fsgdhvsjehdb... | dsfgsgrhsdjdgdhdjdggdjd fsgsgshdhdhrgrdhejgdh fsgshdhdhrhrhrgrhd fsgdhvsjehdbdrdbdj ddhshsbdbdshdgdhdf | dsfgsgrhsdjdgdhdjdggdjd fsgsgshdhdhrgrdhejgdh fsgshdhdhrhrhrgrhd fsgdhvsjehdbdrdbdj ddhshsbdbdshdgdhdf | dsfgsgrhsdjdgdhdjdggdjd fsgsgshdhdhrgrdhejgdh fsgshdhdhrhrhrgrhd fsgdhvsjehdbdrdbdj ddhshsbdbdshdgdhdf | dsfgsgrhsdjdgdhdjdggdjd fsgsgshdhdhrgrdhejgdh fsgshdhdhrhrhrgrhd fsgdhvsjehdbdrdbdj ddhshsbdbdshdgdhdf | dsfgsgrhsdjdgdhdjdggdjd fsgsgshdhdhrgrdhejgdh fsgshdhdhrhrhrgrhd fsgdhvsjehdbdrdbdj ddhshsbdbdshdgdhdf | dsfgsgrhsdjdgdhdjdggdjd fsgsgshdhdhrgrdhejgdh fsgshdhdhrhrhrgrhd fsgdhvsjehdbdrdbdj ddhshsbdbdshdgdhdf | netral |