Tokenizing Preprocessing

Tokenizing is the process of breaking down text into smaller units, called tokens, such as words, phrases, or symbols. This step is crucial for text analysis as it converts unstructured text into a structured format that can be easily processed and analyzed.

No Filtering (Stopwords) Tokenizing
1341 pelayanan nya bagus ramah dan berpengalaman ['pelayanan', 'nya', 'bagus', 'ramah', 'dan', 'berpengalaman']
1342 periksa di X itu rasanya puas banget walaupun rumah sakitnya baru tapi mereka memberi pelayanan yang boleh di apresiasi terus berkembang dan terus berikan pelayanan yang paripurna iya queen good job ['periksa', 'di', 'queen', 'latifa', 'itu', 'rasanya', 'puas', 'banget', 'walaupun', 'rumah', 'sakitnya', 'baru', 'tapi', 'mereka', 'memberi', 'pelayanan', 'yang', 'boleh', 'di', 'apresiasi', 'terus', 'berkembang', 'dan', 'terus', 'berikan', 'pelayanan', 'yang', 'paripurna', 'iya', 'queen', 'good', 'job']
1343 pelayanannya bagus perawatnya ramah ramah ['pelayanannya', 'bagus', 'perawatnya', 'ramah', 'ramah']
1344 rs nya barukaryawannya pada ramah ['rs', 'nya', 'barukaryawannya', 'pada', 'ramah']
1345 pelayanannya ramah tempatnya bersih dan nyaman ['pelayanannya', 'ramah', 'tempatnya', 'bersih', 'dan', 'nyaman']
1346 petugas pendafataran dan pelayanan ramah lingkungan bersih ['petugas', 'pendafataran', 'dan', 'pelayanan', 'ramah', 'lingkungan', 'bersih']
1347 rs X pelayanan bagus dokternya dan perawat ramah sekali ['rs', 'queen', 'latifa', 'pelayanan', 'bagus', 'dokternya', 'dan', 'perawat', 'ramah', 'sekali']
1348 pelayanan ramah dan bagus ['pelayanan', 'ramah', 'dan', 'bagus']
1349 pelayanan kamar oke tagihan keuangan belum akuntable ['pelayanan', 'kamar', 'oke', 'tagihan', 'keuangan', 'belum', 'akuntable']
1350 pelayanan luar biasa perjalanan mudik anak demam terus lewat rsu X pelayanan cepat edukatif dan ramah alhamdullilah anak kembali ceria ['pelayanan', 'luar', 'biasa', 'perjalanan', 'mudik', 'anak', 'demam', 'terus', 'lewat', 'rsu', 'queen', 'latifa', 'pelayanan', 'cepat', 'edukatif', 'dan', 'ramah', 'alhamdullilah', 'anak', 'kembali', 'ceria']