Tokenizing Preprocessing

Tokenizing is the process of breaking down text into smaller units, called tokens, such as words, phrases, or symbols. This step is crucial for text analysis as it converts unstructured text into a structured format that can be easily processed and analyzed.

No Filtering (Stopwords) Tokenizing
1091 joss gandos kotos kotos semua perawat bagus pelayanannya dan kalok bisa di larisin terus iya warungnya bu zaenab masakan dan pelayanannya enak soalnya disana tempat juga nyaman rumah sakit jadi tambah laris karena dekat lokasi warung bu zaenab ['joss', 'gandos', 'kotos', 'kotos', 'semua', 'perawat', 'bagus', 'pelayanannya', 'dan', 'kalok', 'bisa', 'di', 'larisin', 'terus', 'iya', 'warungnya', 'bu', 'zaenab', 'masakan', 'dan', 'pelayanannya', 'enak', 'soalnya', 'disana', 'tempat', 'juga', 'nyaman', 'rumah', 'sakit', 'jadi', 'tambah', 'laris', 'karena', 'dekat', 'lokasi', 'warung', 'bu', 'zaenab']
1092 pelayanannya bagus dan petugasnya juga ramah ramah ['pelayanannya', 'bagus', 'dan', 'petugasnya', 'juga', 'ramah', 'ramah']
1093 rumah sakit yang sangat bagus dan cepat untuk pelayanannya perawatnya ramah ramah dan dokter cepat dalam merespon pasien terima kasih rsu X kulon progo ['rumah', 'sakit', 'yang', 'sangat', 'bagus', 'dan', 'cepat', 'untuk', 'pelayanannya', 'perawatnya', 'ramah', 'ramah', 'dan', 'dokter', 'cepat', 'dalam', 'merespon', 'pasien', 'terima', 'kasih', 'rsu', 'queen', 'latifa', 'kulon', 'progo']
1094 istimewa pelayanan dan servisnya ['istimewa', 'pelayanan', 'dan', 'servisnya']
1095 pelayanan super istimewa ['pelayanan', 'super', 'istimewa']
1096 pelayanan baik sekali ['pelayanan', 'baik', 'sekali']
1097 sudah mahalnya minta ampun pelayanan jelek lambat banget tidak recommend ['sudah', 'mahalnya', 'minta', 'ampun', 'pelayanan', 'jelek', 'lambat', 'banget', 'tidak', 'recommend']
1098 pelayanan di poli bagus perawatbidan ramah dokter ramah tapi untuk fasilitas seperti kamar mandi poli rawat jalan mohon di perhatikan kebersihannya bak ban gayung sangat kotor semoga kedepannya lebih baik lagi ['pelayanan', 'di', 'poli', 'bagus', 'perawatbidan', 'ramah', 'dokter', 'ramah', 'tapi', 'untuk', 'fasilitas', 'seperti', 'kamar', 'mandi', 'poli', 'rawat', 'jalan', 'mohon', 'di', 'perhatikan', 'kebersihannya', 'bak', 'ban', 'gayung', 'sangat', 'kotor', 'semoga', 'kedepannya', 'lebih', 'baik', 'lagi']
1099 tidak tersedia ruang laktasi pelayanan lambat ['tidak', 'tersedia', 'ruang', 'laktasi', 'pelayanan', 'lambat']
1100 pelayanannya mantap perawat dan dokternya juga ramah ['pelayanannya', 'mantap', 'perawat', 'dan', 'dokternya', 'juga', 'ramah']