Tokenizing Preprocessing

Tokenizing is the process of breaking down text into smaller units, called tokens, such as words, phrases, or symbols. This step is crucial for text analysis as it converts unstructured text into a structured format that can be easily processed and analyzed.

No Filtering (Stopwords) Tokenizing
-359 pelayanan yang baikcocok untuk rumah sakit pilihan keluarga ['pelayanan', 'yang', 'baikcocok', 'untuk', 'rumah', 'sakit', 'pilihan', 'keluarga']
-358 sudah kali periksa ke rsu X puas dengan pelayanannya pelayanannya memuaskan perawat dan dokternya ramah ['sudah', 'kali', 'periksa', 'ke', 'rsu', 'queen', 'latifa', 'puas', 'dengan', 'pelayanannya', 'pelayanannya', 'memuaskan', 'perawat', 'dan', 'dokternya', 'ramah']
-357 bagus bgtpelayanan ramah bisa pakai bpjs lagiterbaik pokoknya ['bagus', 'bgtpelayanan', 'ramah', 'bisa', 'pakai', 'bpjs', 'lagiterbaik', 'pokoknya']
-356 terima kasih pelayanannya bagus ['terima', 'kasih', 'pelayanannya', 'bagus']
-355 fasilitas oke pelayanan jugaa oke bangett puas banget mcu disini dokter dan karyawannya ramah semua sukak ['fasilitas', 'oke', 'pelayanan', 'jugaa', 'oke', 'bangett', 'puas', 'banget', 'mcu', 'disini', 'dokter', 'dan', 'karyawannya', 'ramah', 'semua', 'sukak']
-354 pelayanannya ramah dan memuaskan ['pelayanannya', 'ramah', 'dan', 'memuaskan']
-353 pelayanan dari pihak igd dan dokternya cepat dan memuaskan ['pelayanan', 'dari', 'pihak', 'igd', 'dan', 'dokternya', 'cepat', 'dan', 'memuaskan']
-352 periksa di rs ini mulai dari anc di dokter kandungannyalahiran disini jugavaksin anak juga di rs X kp periksa bapak juga disinidengan dokter dalam dan saraf nya rs nya bagusrawat inap nya termewah mantul ['periksa', 'di', 'rs', 'ini', 'mulai', 'dari', 'anc', 'di', 'dokter', 'kandungannyalahiran', 'disini', 'jugavaksin', 'anak', 'juga', 'di', 'rs', 'queen', 'latifa', 'kp', 'periksa', 'bapak', 'juga', 'disinidengan', 'dokter', 'dalam', 'dan', 'saraf', 'nya', 'rs', 'nya', 'bagusrawat', 'inap', 'nya', 'termewah', 'mantul']
-351 pelayanan baik dan ramah ['pelayanan', 'baik', 'dan', 'ramah']
-350 puas dengan layanan di rsu X kulon progo ['puas', 'dengan', 'layanan', 'di', 'rsu', 'queen', 'latifa', 'kulon', 'progo']