Tokenizing Preprocessing

Tokenizing is the process of breaking down text into smaller units, called tokens, such as words, phrases, or symbols. This step is crucial for text analysis as it converts unstructured text into a structured format that can be easily processed and analyzed.

No Filtering (Stopwords) Tokenizing
861 pelayanan memuaskan ['pelayanan', 'memuaskan']
862 perawat super judes mulai dari pendaftaran sampai perawat bangsal ['perawat', 'super', 'judes', 'mulai', 'dari', 'pendaftaran', 'sampai', 'perawat', 'bangsal']
863 rs X pelayanan sangat memuaskan perawat dan tenaga medis sangat ramah ['rs', 'queen', 'latifa', 'pelayanan', 'sangat', 'memuaskan', 'perawat', 'dan', 'tenaga', 'medis', 'sangat', 'ramah']
864 alhamdullilah dokter dan perawat nya sangat baik sekali sangat ramah dan sopan ['alhamdullilah', 'dokter', 'dan', 'perawat', 'nya', 'sangat', 'baik', 'sekali', 'sangat', 'ramah', 'dan', 'sopan']
865 layanan bagus dan nemuaskan ['layanan', 'bagus', 'dan', 'nemuaskan']
866 alhamdulillah di rs X pelayanannya sangat memuaskan dan dokternya juga sangat peduli ['alhamdulillah', 'di', 'rs', 'ql', 'pelayanannya', 'sangat', 'memuaskan', 'dan', 'dokternya', 'juga', 'sangat', 'peduli']
867 mohon akses ke ugd diperhatikan tertutup parkir motor ['mohon', 'akses', 'ke', 'ugd', 'diperhatikan', 'tertutup', 'parkir', 'motor']
868 pegawai di rsX sangat ramah dan selalu memberi pelayanan yang optimal ['pegawai', 'di', 'rsqueen', 'latifa', 'sangat', 'ramah', 'dan', 'selalu', 'memberi', 'pelayanan', 'yang', 'optimal']
869 pelayanan bagus tapi tukang parkir tledor menjatuhkan helem ['pelayanan', 'bagus', 'tapi', 'tukang', 'parkir', 'tledor', 'menjatuhkan', 'helem']
870 pelayanannya semakin bagussemakin maju rsu X ['pelayanannya', 'semakin', 'bagussemakin', 'maju', 'rsu', 'queen', 'latifa']