Tokenizing Preprocessing

Tokenizing is the process of breaking down text into smaller units, called tokens, such as words, phrases, or symbols. This step is crucial for text analysis as it converts unstructured text into a structured format that can be easily processed and analyzed.

No Filtering (Stopwords) Tokenizing
1151 sudah pernah beberapa kali periksa di rs X dari pendaftaran sampai ke igd pelayanan cepat perawat dan dokter sangat ramah ['sudah', 'pernah', 'beberapa', 'kali', 'periksa', 'di', 'rs', 'queen', 'latifa', 'dari', 'pendaftaran', 'sampai', 'ke', 'igd', 'pelayanan', 'cepat', 'perawat', 'dan', 'dokter', 'sangat', 'ramah']
1152 pelayanan baik petugasnya ramah penjelasannya juga bagus baik dari dokter maupun perawatnya ['pelayanan', 'baik', 'petugasnya', 'ramah', 'penjelasannya', 'juga', 'bagus', 'baik', 'dari', 'dokter', 'maupun', 'perawatnya']
1153 betah banget menginap disini jadi tidak mau pulang perawat dan dokternya sangat ramah dan cekatan dalam pelayanan ['betah', 'banget', 'menginap', 'disini', 'jadi', 'tidak', 'mau', 'pulang', 'perawat', 'dan', 'dokternya', 'sangat', 'ramah', 'dan', 'cekatan', 'dalam', 'pelayanan']
1154 luar biasa untuk pelayanan semua petugas ramah dan baik sangat bagus pertahankan ['luar', 'biasa', 'untuk', 'pelayanan', 'semua', 'petugas', 'ramah', 'dan', 'baik', 'sangat', 'bagus', 'pertahankan']
1155 farmasi sangat ramah penjelasan obat mudah dipahami ['farmasi', 'sangat', 'ramah', 'penjelasan', 'obat', 'mudah', 'dipahami']
1156 pertahankan dan tingkatkan pelayanan ['pertahankan', 'dan', 'tingkatkan', 'pelayanan']
1157 kemarin baru saja mondok disana pelayanannya memuaskan perawatnya baik dokternya ramah terimakasih untuk pelayanan yang paripurnanya X ['kemarin', 'baru', 'saja', 'mondok', 'disana', 'pelayanannya', 'memuaskan', 'perawatnya', 'baik', 'dokternya', 'ramah', 'terimakasih', 'untuk', 'pelayanan', 'yang', 'paripurnanya', 'queen', 'latifa']
1158 pelayanan yang memuaskan dokter perawat ramah dan edukatif penjelasan penyakit yang tidak terbelit belit dan mudah dipahami sukses selalu X ['pelayanan', 'yang', 'memuaskan', 'dokter', 'perawat', 'ramah', 'dan', 'edukatif', 'penjelasan', 'penyakit', 'yang', 'tidak', 'terbelit', 'belit', 'dan', 'mudah', 'dipahami', 'sukses', 'selalu', 'queen', 'latifa']
1159 rumah sakit dengan pelayanan yang memuaskan perawat yang dirawat inap ramah ramah pokoknyaa recommended deh ['rumah', 'sakit', 'dengan', 'pelayanan', 'yang', 'memuaskan', 'perawat', 'yang', 'dirawat', 'inap', 'ramah', 'ramah', 'pokoknyaa', 'recommended', 'deh']
1160 best pelayanan dokternya ramah perawatnya ramah bisa pakai bpjs juga terimakasih kami dipermudah banget ['best', 'pelayanan', 'dokternya', 'ramah', 'perawatnya', 'ramah', 'bisa', 'pakai', 'bpjs', 'juga', 'terimakasih', 'kami', 'dipermudah', 'banget']