Tokenizing Preprocessing

Tokenizing is the process of breaking down text into smaller units, called tokens, such as words, phrases, or symbols. This step is crucial for text analysis as it converts unstructured text into a structured format that can be easily processed and analyzed.

No Filtering (Stopwords) Tokenizing
801 pelayanan di rsu X sangat baik petugasnya ramah ramah tempatnya bersih ['pelayanan', 'di', 'rsu', 'queen', 'latifa', 'sangat', 'baik', 'petugasnya', 'ramah', 'ramah', 'tempatnya', 'bersih']
802 pelayanan yang baik dan ramah ['pelayanan', 'yang', 'baik', 'dan', 'ramah']
803 terimakasih pelayanan disini sangat memuaskandokter dan perawat sangat ramah ['terimakasih', 'pelayanan', 'disini', 'sangat', 'memuaskandokter', 'dan', 'perawat', 'sangat', 'ramah']
804 nomor yang dihungi tidak bisa semua padahal kemarin minta di telfon buat tanya obat sudah dtelfon eh bahkan nomor nya semua tidak bisa di tlfn bagaimana ya ['nomor', 'yang', 'dihungi', 'tidak', 'bisa', 'semua', 'padahal', 'kemarin', 'minta', 'di', 'telfon', 'buat', 'tanya', 'obat', 'sudah', 'dtelfon', 'eh', 'bahkan', 'nomor', 'nya', 'semua', 'tidak', 'bisa', 'di', 'tlfn', 'bagaimana', 'ya']
805 dulu saya berobat di sini dan kontrol selama bulan alhamdulillah kini saya sehat kembali terima kasih rsu X ['dulu', 'saya', 'berobat', 'di', 'sini', 'dan', 'kontrol', 'selama', 'bulan', 'alhamdulillah', 'kini', 'saya', 'sehat', 'kembali', 'terima', 'kasih', 'rsu', 'queen', 'latifa']
806 parkiran rapi dan amanteratur khusus parkir terpisah karyawan dengan pasien ['parkiran', 'rapi', 'dan', 'amanteratur', 'khusus', 'parkir', 'terpisah', 'karyawan', 'dengan', 'pasien']
807 rumah sakit bersih pelayanan petugas kasir juga sangat baik ['rumah', 'sakit', 'bersih', 'pelayanan', 'petugas', 'kasir', 'juga', 'sangat', 'baik']
808 semoga bermanfaat bagi orang banyak ['semoga', 'bermanfaat', 'bagi', 'orang', 'banyak']
809 rumah sakitnya bersih dan nyaman pelayanannya sangat bagus ['rumah', 'sakitnya', 'bersih', 'dan', 'nyaman', 'pelayanannya', 'sangat', 'bagus']
810 untuk tempat parkirnya luas bersih petugas parkir nya ramah dan kendaraan ditata rapi ['untuk', 'tempat', 'parkirnya', 'luas', 'bersih', 'petugas', 'parkir', 'nya', 'ramah', 'dan', 'kendaraan', 'ditata', 'rapi']