Tokenizing Preprocessing

Tokenizing is the process of breaking down text into smaller units, called tokens, such as words, phrases, or symbols. This step is crucial for text analysis as it converts unstructured text into a structured format that can be easily processed and analyzed.

No Filtering (Stopwords) Tokenizing
1391 pengalaman saya pertama kali ke rsu X kaget kaget nya cepat antri atas nama nya pelayanan yang ramah dan harga obat juga standar sukses selalu rsu X ['pengalaman', 'saya', 'pertama', 'kali', 'ke', 'rsu', 'queen', 'latifa', 'kaget', 'kaget', 'nya', 'cepat', 'antri', 'atas', 'nama', 'nya', 'pelayanan', 'yang', 'ramah', 'dan', 'harga', 'obat', 'juga', 'standar', 'sukses', 'selalu', 'rsu', 'queen', 'latifa']
1392 pelayanan cepat dokternya ramah perawatnya cantik cantik ['pelayanan', 'cepat', 'dokternya', 'ramah', 'perawatnya', 'cantik', 'cantik']
1393 dokter nya ramah pelayanannya bagusharga terjangkau waktu itu konsultasi ke dokter spesialis anak dari gina puspita mscspa beliau ramah dan waktu konsultasi penjelasannya mudah untuk dimengerti ['dokter', 'nya', 'ramah', 'pelayanannya', 'bagusharga', 'terjangkau', 'waktu', 'itu', 'konsultasi', 'ke', 'dokter', 'spesialis', 'anak', 'dari', 'gina', 'puspita', 'mscspa', 'beliau', 'ramah', 'dan', 'waktu', 'konsultasi', 'penjelasannya', 'mudah', 'untuk', 'dimengerti']
1394 tempatnya nyaman adeem ['tempatnya', 'nyaman', 'adeem']
1395 dokternya ramah enak diajak konsultasi ['dokternya', 'ramah', 'enak', 'diajak', 'konsultasi']
1396 rs nya tenang tidak antri ['rs', 'nya', 'tenang', 'tidak', 'antri']
1397 sangat puas banget pelayananan memuaskan ['sangat', 'puas', 'banget', 'pelayananan', 'memuaskan']
1398 kesini pas mau cek antigen pelayanan ramah dan sopan bahkan ditelp malam hari untuk minta scanan hasil antigen yang hilang juga dilayani berkas pdf dikirim secara cepat terimakasih X kulon progo ['kesini', 'pas', 'mau', 'cek', 'antigen', 'pelayanan', 'ramah', 'dan', 'sopan', 'bahkan', 'ditelp', 'malam', 'hari', 'untuk', 'minta', 'scanan', 'hasil', 'antigen', 'yang', 'hilang', 'juga', 'dilayani', 'berkas', 'pdf', 'dikirim', 'secara', 'cepat', 'terimakasih', 'queen', 'latifah', 'kulon', 'progo']
1399 dari admin perawat bidan semua ramah sebenarnya menyenangkan suasananya juga sepi enak apalagi pas masa pandemi begini menjauhi rs yang padat tapi untuk dokter spog nya saya kurang puas dengan dokternya karena hanya sebentar kak tidak sampai menit paling tidak ada penjelasan dan lain-lain ketika usg nya kami membayar mahal untuk melihat kondisi calon anak kami soalnya dan saya menginginkan usg di tidak di accord dokter padahal saya menunggunya tolong lebih diperbaiki kalau bisa ganti dokter sekalian terima kasih ['dari', 'admin', 'perawat', 'bidan', 'semua', 'ramah', 'sebenarnya', 'menyenangkan', 'suasananya', 'juga', 'sepi', 'enak', 'apalagi', 'pas', 'masa', 'pandemi', 'begini', 'menjauhi', 'rs', 'yang', 'padat', 'tapi', 'untuk', 'dokter', 'spog', 'nya', 'saya', 'kurang', 'puas', 'dengan', 'dokternya', 'karena', 'hanya', 'sebentar', 'kak', 'tidak', 'sampai', 'menit', 'paling', 'tidak', 'ada', 'penjelasan', 'dan', 'lain-lain', 'ketika', 'usg', 'nya', 'kami', 'membayar', 'mahal', 'untuk', 'melihat', 'kondisi', 'calon', 'anak', 'kami', 'soalnya', 'dan', 'saya', 'menginginkan', 'usg', 'di', 'tidak', 'di', 'accord', 'dokter', 'padahal', 'saya', 'menunggunya', 'tolong', 'lebih', 'diperbaiki', 'kalau', 'bisa', 'ganti', 'dokter', 'sekalian', 'terima', 'kasih']
1400 pelayanan cepat tepat waktu ['pelayanan', 'cepat', 'tepat', 'waktu']