Tokenizing Preprocessing

Tokenizing is the process of breaking down text into smaller units, called tokens, such as words, phrases, or symbols. This step is crucial for text analysis as it converts unstructured text into a structured format that can be easily processed and analyzed.

No Filtering (Stopwords) Tokenizing
501 mau periksa di poli tht hari jumat lihat jadwal ada jadwal dokter jam datang sampai lokasi jam kemudian pendaftaran menit kemduian pas sudah sampai poli ehh dokternya sudah pulang padahal belum ada jam agak lucu tapi dongkol wong belum jam kok sudah pulang dokternya hehee akhirnya suruh kembali besok mohon dibina dan dibenahi maturnuwun ['mau', 'periksa', 'di', 'poli', 'tht', 'hari', 'jumat', 'lihat', 'jadwal', 'ada', 'jadwal', 'dokter', 'jam', 'datang', 'sampai', 'lokasi', 'jam', 'kemudian', 'pendaftaran', 'menit', 'kemduian', 'pas', 'sudah', 'sampai', 'poli', 'ehh', 'dokternya', 'sudah', 'pulang', 'padahal', 'belum', 'ada', 'jam', 'agak', 'lucu', 'tapi', 'dongkol', 'wong', 'belum', 'jam', 'kok', 'sudah', 'pulang', 'dokternya', 'hehee', 'akhirnya', 'suruh', 'kembali', 'besok', 'mohon', 'dibina', 'dan', 'dibenahi', 'maturnuwun']
502 hari sabtu saya periksa ke dokter tht di rs X pakai bpjs karena telinga saya kemasukan kapas cutonbud diperiksa dokternya katanya di lihat pakai alatnya itu tidak ada kapas yang ada kotoran yang keras tapi telinga saya masih mengganjal akhirnya besoknya saya ke dokter tht yang berbayar bukan yang pakai bpjs ternyata ada kapasnya dan sudah diambil sama dokter yang berbayar itu dan beliau bilang ini kalau tidak segera di ambil bisa daging tumbuh loo wah parah dokter tht X apa karena saya pakai bpjs karenanya tidak mau kasih tindakan padahal saya bpjs rutin bayar per bulan tidak pernah terlambat ini kalau saya percaya saja sama dokter qurn latifa itu dan tidak segera saya bawa ke dokter lain yang berbayar sudah ada daging tumbuh mungkin di telinga saya kalau sampai itu terjadi apa mau dokter X tanggung jawab wah parah bpjs itu juga bayar per bulan jadi jangan di sepelakan sumpah parah bburuk sekali ['hari', 'sabtu', 'saya', 'periksa', 'ke', 'dokter', 'tht', 'di', 'rs', 'quen', 'latifa', 'pakai', 'bpjs', 'karena', 'telinga', 'saya', 'kemasukan', 'kapas', 'cutonbud', 'diperiksa', 'dokternya', 'katanya', 'di', 'lihat', 'pakai', 'alatnya', 'itu', 'tidak', 'ada', 'kapas', 'yang', 'ada', 'kotoran', 'yang', 'keras', 'tapi', 'telinga', 'saya', 'masih', 'mengganjal', 'akhirnya', 'besoknya', 'saya', 'ke', 'dokter', 'tht', 'yang', 'berbayar', 'bukan', 'yang', 'pakai', 'bpjs', 'ternyata', 'ada', 'kapasnya', 'dan', 'sudah', 'diambil', 'sama', 'dokter', 'yang', 'berbayar', 'itu', 'dan', 'beliau', 'bilang', 'ini', 'kalau', 'tidak', 'segera', 'di', 'ambil', 'bisa', 'daging', 'tumbuh', 'loo', 'wah', 'parah', 'dokter', 'tht', 'quen', 'latifa', 'apa', 'karena', 'saya', 'pakai', 'bpjs', 'karenanya', 'tidak', 'mau', 'kasih', 'tindakan', 'padahal', 'saya', 'bpjs', 'rutin', 'bayar', 'per', 'bulan', 'tidak', 'pernah', 'terlambat', 'ini', 'kalau', 'saya', 'percaya', 'saja', 'sama', 'dokter', 'qurn', 'latifa', 'itu', 'dan', 'tidak', 'segera', 'saya', 'bawa', 'ke', 'dokter', 'lain', 'yang', 'berbayar', 'sudah', 'ada', 'daging', 'tumbuh', 'mungkin', 'di', 'telinga', 'saya', 'kalau', 'sampai', 'itu', 'terjadi', 'apa', 'mau', 'dokter', 'quen', 'latifa', 'tanggung', 'jawab', 'wah', 'parah', 'bpjs', 'itu', 'juga', 'bayar', 'per', 'bulan', 'jadi', 'jangan', 'di', 'sepelakan', 'sumpah', 'parah', 'bburuk', 'sekali']
503 mau masukkan kotak suara atau pengaduan kok tidak ada yadokternya ramah sgat nyaman tapi giliran di class ada perawat yang sangat buruk sekali pelayanan nyakl untuk hal berbicara saja tidak bgitu parah tapi ini kalau anak kecil lagi di rawat butuh bantuan justru kasar pelayanan nya ingat kak ini nyawaciri orang nya ada di class berbadan gemuk dan satu nya kurus semua galak dan pelayanan sungguh kasar dan tidak hatikl ada kotak suara atau pengaduan saya mau komplain biar di tangani oleh atasannya ['mau', 'masukkan', 'kotak', 'suara', 'atau', 'pengaduan', 'kok', 'tidak', 'ada', 'yadokternya', 'ramah', 'sgat', 'nyaman', 'tapi', 'giliran', 'di', 'class', 'ada', 'perawat', 'yang', 'sangat', 'buruk', 'sekali', 'pelayanan', 'nyakl', 'untuk', 'hal', 'berbicara', 'saja', 'tidak', 'bgitu', 'parah', 'tapi', 'ini', 'kalau', 'anak', 'kecil', 'lagi', 'di', 'rawat', 'butuh', 'bantuan', 'justru', 'kasar', 'pelayanan', 'nya', 'ingat', 'kak', 'ini', 'nyawaciri', 'orang', 'nya', 'ada', 'di', 'class', 'berbadan', 'gemuk', 'dan', 'satu', 'nya', 'kurus', 'semua', 'galak', 'dan', 'pelayanan', 'sungguh', 'kasar', 'dan', 'tidak', 'hatikl', 'ada', 'kotak', 'suara', 'atau', 'pengaduan', 'saya', 'mau', 'komplain', 'biar', 'di', 'tangani', 'oleh', 'atasannya']
504 pelayananya sangat baik petugasnya ramah serta pemberian edukasinya pun jelas dan tepat lingkunganya bersih dan nyaman semoga menjadi sarana kesehatan yang tepat bagi keluarga dan sekitarnya terimakasih rs X semoga sukses selalu ['pelayananya', 'sangat', 'baik', 'petugasnya', 'ramah', 'serta', 'pemberian', 'edukasinya', 'pun', 'jelas', 'dan', 'tepat', 'lingkunganya', 'bersih', 'dan', 'nyaman', 'semoga', 'menjadi', 'sarana', 'kesehatan', 'yang', 'tepat', 'bagi', 'keluarga', 'dan', 'sekitarnya', 'terimakasih', 'rs', 'ql', 'semoga', 'sukses', 'selalu']
505 antri obat lama banget ['antri', 'obat', 'lama', 'banget']
506 sekarang pelayanan lebih baik drpda dulu kurang lebih th yang laluu lebih tepatnya dokter di poli kandunganjudes mentang saya pakai bpjs sekarang banyak yang ramah dan membantu mengarahkan dengan baik dokter di orthopedi jugaa baik sekali good job X ['sekarang', 'pelayanan', 'lebih', 'baik', 'drpda', 'dulu', 'kurang', 'lebih', 'th', 'yang', 'laluu', 'lebih', 'tepatnya', 'dokter', 'di', 'poli', 'kandunganjudes', 'mentang', 'saya', 'pakai', 'bpjs', 'sekarang', 'banyak', 'yang', 'ramah', 'dan', 'membantu', 'mengarahkan', 'dengan', 'baik', 'dokter', 'di', 'orthopedi', 'jugaa', 'baik', 'sekali', 'good', 'job', 'queen', 'latifa']
507 pelayanan di rs X cukup baik cepatkaryawannya juga sangat ramah bisa konfirmasi dulu dari rumah melalui sambungan telfon cepat dalam menanggapi pasien dan sangat sabar terimakasih Xh ['pelayanan', 'di', 'rs', 'queen', 'latifa', 'cukup', 'baik', 'cepatkaryawannya', 'juga', 'sangat', 'ramah', 'bisa', 'konfirmasi', 'dulu', 'dari', 'rumah', 'melalui', 'sambungan', 'telfon', 'cepat', 'dalam', 'menanggapi', 'pasien', 'dan', 'sangat', 'sabar', 'terimakasih', 'queen', 'latifah']
508 pelayanan farmasi nya cepatorangnya ramah²informatifdan cara menjelaskannya pun menggunakan bahasa yang mudah dipahami semua orang ['pelayanan', 'farmasi', 'nya', 'cepatorangnya', 'ramah²informatifdan', 'cara', 'menjelaskannya', 'pun', 'menggunakan', 'bahasa', 'yang', 'mudah', 'dipahami', 'semua', 'orang']
509 rumah sakit yang nyaman bisa daftar lewat online pelayanan sangat memuaskan petugas nya baik dan ramah sukses selalu X ['rumah', 'sakit', 'yang', 'nyaman', 'bisa', 'daftar', 'lewat', 'online', 'pelayanan', 'sangat', 'memuaskan', 'petugas', 'nya', 'baik', 'dan', 'ramah', 'sukses', 'selalu', 'queen', 'latifa']
510 rumah sakit terpercaya dan memuaskan pelayanannya cepat dan baik apalagi bagian kasir farmasinya baik bangett ['rumah', 'sakit', 'terpercaya', 'dan', 'memuaskan', 'pelayanannya', 'cepat', 'dan', 'baik', 'apalagi', 'bagian', 'kasir', 'farmasinya', 'baik', 'bangett']