Tokenizing Preprocessing

Tokenizing is the process of breaking down text into smaller units, called tokens, such as words, phrases, or symbols. This step is crucial for text analysis as it converts unstructured text into a structured format that can be easily processed and analyzed.

No Filtering (Stopwords) Tokenizing
-609 layanan bagus dan nemuaskan ['layanan', 'bagus', 'dan', 'nemuaskan']
-608 alhamdulillah di rs X pelayanannya sangat memuaskan dan dokternya juga sangat peduli ['alhamdulillah', 'di', 'rs', 'ql', 'pelayanannya', 'sangat', 'memuaskan', 'dan', 'dokternya', 'juga', 'sangat', 'peduli']
-607 mohon akses ke ugd diperhatikan tertutup parkir motor ['mohon', 'akses', 'ke', 'ugd', 'diperhatikan', 'tertutup', 'parkir', 'motor']
-606 pegawai di rsX sangat ramah dan selalu memberi pelayanan yang optimal ['pegawai', 'di', 'rsqueen', 'latifa', 'sangat', 'ramah', 'dan', 'selalu', 'memberi', 'pelayanan', 'yang', 'optimal']
-605 pelayanan bagus tapi tukang parkir tledor menjatuhkan helem ['pelayanan', 'bagus', 'tapi', 'tukang', 'parkir', 'tledor', 'menjatuhkan', 'helem']
-604 pelayanannya semakin bagussemakin maju rsu X ['pelayanannya', 'semakin', 'bagussemakin', 'maju', 'rsu', 'queen', 'latifa']
-603 pernah beberapa kali kesini pelayanan cukup ramah dan baik tapi ada tempat lain yang lebih baik ['pernah', 'beberapa', 'kali', 'kesini', 'pelayanan', 'cukup', 'ramah', 'dan', 'baik', 'tapi', 'ada', 'tempat', 'lain', 'yang', 'lebih', 'baik']
-602 pendaftaran sekarang banyak jadi cepat dan nyaman ['pendaftaran', 'sekarang', 'banyak', 'jadi', 'cepat', 'dan', 'nyaman']
-601 rumah sakitnya bersih dan pelayanannya sangat baik ['rumah', 'sakitnya', 'bersih', 'dan', 'pelayanannya', 'sangat', 'baik']
-600 pelayanan memuaskan dan petugasnya ramahramah ['pelayanan', 'memuaskan', 'dan', 'petugasnya', 'ramahramah']