Tokenizing Preprocessing

Tokenizing is the process of breaking down text into smaller units, called tokens, such as words, phrases, or symbols. This step is crucial for text analysis as it converts unstructured text into a structured format that can be easily processed and analyzed.

No Filtering (Stopwords) Tokenizing
901 alhamdulillah pelayanannya baik perawat nya ramah ramah ['alhamdulillah', 'pelayanannya', 'baik', 'perawat', 'nya', 'ramah', 'ramah']
902 mau cek di ke poli dari jam sampai jam kan tidak jelas ['mau', 'cek', 'di', 'ke', 'poli', 'dari', 'jam', 'sampai', 'jam', 'kan', 'tidak', 'jelas']
903 pelayanan bagusdokternya ramah ['pelayanan', 'bagusdokternya', 'ramah']
904 pelayanan sangat cepat tidak perlu menunggu ber jam dan karyawan sangat ramah ramah ['pelayanan', 'sangat', 'cepat', 'tidak', 'perlu', 'menunggu', 'ber', 'jam', 'dan', 'karyawan', 'sangat', 'ramah', 'ramah']
905 layanan bagus ['layanan', 'bagus']
906 pelayanan bagus semakin ditingkatkan ['pelayanan', 'bagus', 'semakin', 'ditingkatkan']
907 antri farmasi perlu di perbaiki ['antri', 'farmasi', 'perlu', 'di', 'perbaiki']
908 rumah sakit keluarga bisa pakai bpjs pelayanan baik dan tidak kalah dengan rumah sakit mahal ['rumah', 'sakit', 'keluarga', 'bisa', 'pakai', 'bpjs', 'pelayanan', 'baik', 'dan', 'tidak', 'kalah', 'dengan', 'rumah', 'sakit', 'mahal']
909 tempatnya bersih nyaman dan asri para petugasnya juga sangat ramah ['tempatnya', 'bersih', 'nyaman', 'dan', 'asri', 'para', 'petugasnya', 'juga', 'sangat', 'ramah']
910 pelayanan sangat ramah lingkungan nyaman dan bersih ['pelayanan', 'sangat', 'ramah', 'lingkungan', 'nyaman', 'dan', 'bersih']