Tokenizing Preprocessing

Tokenizing is the process of breaking down text into smaller units, called tokens, such as words, phrases, or symbols. This step is crucial for text analysis as it converts unstructured text into a structured format that can be easily processed and analyzed.

No Filtering (Stopwords) Tokenizing
1381 pelayanan baik dan ramah ['pelayanan', 'baik', 'dan', 'ramah']
1382 pelayanan bagus ramah ['pelayanan', 'bagus', 'ramah']
1383 oke bagus sangat puas terima ksih dari arta ['oke', 'bagus', 'sangat', 'puas', 'terima', 'ksih', 'dari', 'arta']
1384 alhamdulillah dari awal kehamilan istri sampai melahirkan dan saat ini masih rutin imunisasi anak di rs Xpelayanan selalu baik dan ramah terimakasih rs X ['alhamdulillah', 'dari', 'awal', 'kehamilan', 'istri', 'sampai', 'melahirkan', 'dan', 'saat', 'ini', 'masih', 'rutin', 'imunisasi', 'anak', 'di', 'rs', 'queen', 'latifapelayanan', 'selalu', 'baik', 'dan', 'ramah', 'terimakasih', 'rs', 'queen', 'latifa']
1385 pelayanannya benerbener ramah pokoknya the best rs X ['pelayanannya', 'benerbener', 'ramah', 'pokoknya', 'the', 'best', 'rs', 'queen', 'latifa']
1386 kedua kalinya pergi kesini pelayanan nya sangat ramah nyaman dan bersahabat banget ngobrol dan konsultasi semakin menyenangkan ['kedua', 'kalinya', 'pergi', 'kesini', 'pelayanan', 'nya', 'sangat', 'ramah', 'nyaman', 'dan', 'bersahabat', 'banget', 'ngobrol', 'dan', 'konsultasi', 'semakin', 'menyenangkan']
1387 rsu yang baik pelayanannya dari dktr perawat semua welcome ditambah lagi dong pelayanan untuk spesialis kulit sukses buat X ['rsu', 'yang', 'baik', 'pelayanannya', 'dari', 'dktr', 'perawat', 'semua', 'welcome', 'ditambah', 'lagi', 'dong', 'pelayanan', 'untuk', 'spesialis', 'kulit', 'sukses', 'buat', 'X']
1388 pelayanan bagus konsultasi dengan dokter sangat membantu ['pelayanan', 'bagus', 'konsultasi', 'dengan', 'dokter', 'sangat', 'membantu']
1389 pelayanan oke tempatnya bersih ['pelayanan', 'oke', 'tempatnya', 'bersih']
1390 pelayanan bagus tempat bersih dokter dan perawat ramah komunikatif semoga semakin baik ['pelayanan', 'bagus', 'tempat', 'bersih', 'dokter', 'dan', 'perawat', 'ramah', 'komunikatif', 'semoga', 'semakin', 'baik']