Tokenizing Preprocessing

Tokenizing is the process of breaking down text into smaller units, called tokens, such as words, phrases, or symbols. This step is crucial for text analysis as it converts unstructured text into a structured format that can be easily processed and analyzed.

No Filtering (Stopwords) Tokenizing
-989 pelayanannya sangat baik petugasnya juga ramah² tidak pada tidak acuh dan pelayanan antigennya memusakan tidak lama kemarin saya kan bertanya soal gejala dijelasin alur²nya konsul ke dokternya tempatnya bersih dan tentunya juga nyaman ['pelayanannya', 'sangat', 'baik', 'petugasnya', 'juga', 'ramah²', 'tidak', 'pada', 'tidak', 'acuh', 'dan', 'pelayanan', 'antigennya', 'memusakan', 'tidak', 'lama', 'kemarin', 'saya', 'kan', 'bertanya', 'soal', 'gejala', 'dijelasin', 'alur²nya', 'konsul', 'ke', 'dokternya', 'tempatnya', 'bersih', 'dan', 'tentunya', 'juga', 'nyaman']
-988 sangat kecewa dengan pelayanan mulai dari bagian pendaftaran sudah nomor antri kecil via online datang juga jam tapi ternyata di poli yang dipanggil dluan sesuai yang mengumpulkan berkas di poli lebih awal mski nomernya besar padahal jelas tidak terlewat antrian ['sangat', 'kecewa', 'dengan', 'pelayanan', 'mulai', 'dari', 'bagian', 'pendaftaran', 'sudah', 'nomor', 'antri', 'kecil', 'via', 'online', 'datang', 'juga', 'jam', 'tapi', 'ternyata', 'di', 'poli', 'yang', 'dipanggil', 'dluan', 'sesuai', 'yang', 'mengumpulkan', 'berkas', 'di', 'poli', 'lebih', 'awal', 'mski', 'nomernya', 'besar', 'padahal', 'jelas', 'tidak', 'terlewat', 'antrian']
-987 hari ini periksa ke dokter gigi konservasi masyaallah dokternya dan perawatnya ramah banget bikin tidak takut buat periksa lagi ke poli gigi rs X ['hari', 'ini', 'periksa', 'ke', 'dokter', 'gigi', 'konservasi', 'masyaallah', 'dokternya', 'dan', 'perawatnya', 'ramah', 'banget', 'bikin', 'tidak', 'takut', 'buat', 'periksa', 'lagi', 'ke', 'poli', 'gigi', 'rs', 'queen', 'latifa']
-986 mcu pelayanan baik memuaskan ['mcu', 'pelayanan', 'baik', 'memuaskan']
-985 pelayanan ramah terutama di bagian igd beberapa kali berobat di sana tidak pernah mengecewakan dokter perawat dan seluruh staf kompeten ['pelayanan', 'ramah', 'terutama', 'di', 'bagian', 'igd', 'beberapa', 'kali', 'berobat', 'di', 'sana', 'tidak', 'pernah', 'mengecewakan', 'dokter', 'perawat', 'dan', 'seluruh', 'staf', 'kompeten']
-984 mau usg disuruh berangkat pagi karena dimulai jam pagi akhirnya jam dokter baru datang ['mau', 'usg', 'disuruh', 'berangkat', 'pagi', 'karena', 'dimulai', 'jam', 'pagi', 'akhirnya', 'jam', 'dokter', 'baru', 'datang']
-983 pelayanan informasi dan pendaftaran sangat jelas dan terarah ramah sopan santun dan sabar sama keluarga pasien untuk parkiran mobil kalau hujan agak becek ['pelayanan', 'informasi', 'dan', 'pendaftaran', 'sangat', 'jelas', 'dan', 'terarah', 'ramah', 'sopan', 'santun', 'dan', 'sabar', 'sama', 'keluarga', 'pasien', 'untuk', 'parkiran', 'mobil', 'kalau', 'hujan', 'agak', 'becek']
-982 saya pasian hipertiroid yang biasa cek up di rsa ugm bagian poli penyakit dalam setiap bulannya karena peraturan rujukan yang baru harus lewat rs X saya mengikuti peraturan yang ada pertama kali saya ke sana dokter memberikan rujukan ke rsa dan ketika bulan berikutnya saya minta rujukan lagi untuk cek up reaksi dokternya sangat tidak ramah dan melah mengejek penyakit dengan obat seperti begini kok harus di rsa pdahal di puskesmas saja banyak terus dia seperti menolak untuk memberikan rujukan saya menjawab kalau cuma mengikuti prosedur dari rumah sakit rsa kalau rumah sakit tersebut menyuruh saya cek up disitu setiap bulan iya saya ikuti karena saya ingin sembuh sembari saya menyodorkan surat yang saya dpat dari rsa ke dokter tersebut agar percaya tidak nyangka seorang dokter yang kerja di bidang pelayanan seperti itu sikapnya ke pasien saya juga seorang yang setiap harinya kerja di bidang pelayanan namun saya tidak seperti itu dalam melayani costumer saya ['saya', 'pasian', 'hipertiroid', 'yang', 'biasa', 'cek', 'up', 'di', 'rsa', 'ugm', 'bagian', 'poli', 'penyakit', 'dalam', 'setiap', 'bulannya', 'karena', 'peraturan', 'rujukan', 'yang', 'baru', 'harus', 'lewat', 'rs', 'queen', 'latifa', 'saya', 'mengikuti', 'peraturan', 'yang', 'ada', 'pertama', 'kali', 'saya', 'ke', 'sana', 'dokter', 'memberikan', 'rujukan', 'ke', 'rsa', 'dan', 'ketika', 'bulan', 'berikutnya', 'saya', 'minta', 'rujukan', 'lagi', 'untuk', 'cek', 'up', 'reaksi', 'dokternya', 'sangat', 'tidak', 'ramah', 'dan', 'melah', 'mengejek', 'penyakit', 'dengan', 'obat', 'seperti', 'begini', 'kok', 'harus', 'di', 'rsa', 'pdahal', 'di', 'puskesmas', 'saja', 'banyak', 'terus', 'dia', 'seperti', 'menolak', 'untuk', 'memberikan', 'rujukan', 'saya', 'menjawab', 'kalau', 'cuma', 'mengikuti', 'prosedur', 'dari', 'rumah', 'sakit', 'rsa', 'kalau', 'rumah', 'sakit', 'tersebut', 'menyuruh', 'saya', 'cek', 'up', 'disitu', 'setiap', 'bulan', 'iya', 'saya', 'ikuti', 'karena', 'saya', 'ingin', 'sembuh', 'sembari', 'saya', 'menyodorkan', 'surat', 'yang', 'saya', 'dpat', 'dari', 'rsa', 'ke', 'dokter', 'tersebut', 'agar', 'percaya', 'tidak', 'nyangka', 'seorang', 'dokter', 'yang', 'kerja', 'di', 'bidang', 'pelayanan', 'seperti', 'itu', 'sikapnya', 'ke', 'pasien', 'saya', 'juga', 'seorang', 'yang', 'setiap', 'harinya', 'kerja', 'di', 'bidang', 'pelayanan', 'namun', 'saya', 'tidak', 'seperti', 'itu', 'dalam', 'melayani', 'costumer', 'saya']
-981 sukaa pelayanannya ['sukaa', 'pelayanannya']
-980 dokter artha poli anak sangat mngecewakan tidak on time anak anak suruh menunggu kasihan bu orang sakit ini agar bisa di evaluasi lagi agar lebih baik kedepanya ['dokter', 'artha', 'poli', 'anak', 'sangat', 'mngecewakan', 'tidak', 'on', 'time', 'anak', 'anak', 'suruh', 'menunggu', 'kasihan', 'bu', 'orang', 'sakit', 'ini', 'agar', 'bisa', 'di', 'evaluasi', 'lagi', 'agar', 'lebih', 'baik', 'kedepanya']