Tokenizing Preprocessing

Tokenizing is the process of breaking down text into smaller units, called tokens, such as words, phrases, or symbols. This step is crucial for text analysis as it converts unstructured text into a structured format that can be easily processed and analyzed.

No Filtering (Stopwords) Tokenizing
-399 perjalanan dari bandara yia mau ke arah yogyakarta ternyata aku sakit dan driver ngarahin ke rumah sakit ini terima kasih banyak para nakes yang bertugas sehat selalu pelayanannya bagus aku ngerasa mereka cekatan dan komunikatif sukses selalu rumah sakit X ['perjalanan', 'dari', 'bandara', 'yia', 'mau', 'ke', 'arah', 'yogyakarta', 'ternyata', 'aku', 'sakit', 'dan', 'driver', 'ngarahin', 'ke', 'rumah', 'sakit', 'ini', 'terima', 'kasih', 'banyak', 'para', 'nakes', 'yang', 'bertugas', 'sehat', 'selalu', 'pelayanannya', 'bagus', 'aku', 'ngerasa', 'mereka', 'cekatan', 'dan', 'komunikatif', 'sukses', 'selalu', 'rumah', 'sakit', 'queen', 'latifa']
-398 pelayanannya memuaskan dokter perawat dan tenaga medis lainnya sangat ramah lingkungan rs juga bersih dan nyaman sukses selalu rsu X kulon progo ['pelayanannya', 'memuaskan', 'dokter', 'perawat', 'dan', 'tenaga', 'medis', 'lainnya', 'sangat', 'ramah', 'lingkungan', 'rs', 'juga', 'bersih', 'dan', 'nyaman', 'sukses', 'selalu', 'rsu', 'queen', 'latifa', 'kulon', 'progo']
-397 dokter dan perawatnya ramah pelayanannya bagus dan cekatan ['dokter', 'dan', 'perawatnya', 'ramah', 'pelayanannya', 'bagus', 'dan', 'cekatan']
-396 terima kasih rsu X kulon progo telah menolong persalinan istri perawat dan bidan ramah sigap dan cekatan semoga semakin maju dan berkembang ['terima', 'kasih', 'rsu', 'queen', 'latifa', 'kulon', 'progo', 'telah', 'menolong', 'persalinan', 'istri', 'perawat', 'dan', 'bidan', 'ramah', 'sigap', 'dan', 'cekatan', 'semoga', 'semakin', 'maju', 'dan', 'berkembang']
-395 sangat bagus sat set ['sangat', 'bagus', 'sat', 'set']
-394 pelayanannya ramah cepat sigap menangani pasien datang di igd ['pelayanannya', 'ramah', 'cepat', 'sigap', 'menangani', 'pasien', 'datang', 'di', 'igd']
-393 pelayanannya ramahmasuk igd langsung ditangani oleh perawat dan dokternyadokternya menjelaskan secara detailalhamdulillah setelah diperiksa dan dikasih obat sembuhhterimakasih X ['pelayanannya', 'ramahmasuk', 'igd', 'langsung', 'ditangani', 'oleh', 'perawat', 'dan', 'dokternyadokternya', 'menjelaskan', 'secara', 'detailalhamdulillah', 'setelah', 'diperiksa', 'dan', 'dikasih', 'obat', 'sembuhhterimakasih', 'queen', 'latifa']
-392 dokternya tidak on time jam jadwal datang jam pasien kurang diperhatikan ['dokternya', 'tidak', 'on', 'time', 'jam', 'jadwal', 'datang', 'jam', 'pasien', 'kurang', 'diperhatikan']
-391 perawatnya lambat santai dokternya tidak on timebuka jam datang jam ['perawatnya', 'lambat', 'santai', 'dokternya', 'tidak', 'on', 'timebuka', 'jam', 'datang', 'jam']
-390 pelayanan baik dan petugasnya ramah² ['pelayanan', 'baik', 'dan', 'petugasnya', 'ramah²']