Tokenizing is the process of breaking down text into smaller units, called tokens, such as words, phrases, or symbols. This step is crucial for text analysis as it converts unstructured text into a structured format that can be easily processed and analyzed.
| No | Filtering (Stopwords) | Tokenizing |
|---|---|---|
| 971 | pelayanan memuaskan | ['pelayanan', 'memuaskan'] |
| 972 | terima kasih sudah memberikan pelayanan yang terbaik | ['terima', 'kasih', 'sudah', 'memberikan', 'pelayanan', 'yang', 'terbaik'] |
| 973 | pelayanan dan perawat nya ramah semoga istiqomah | ['pelayanan', 'dan', 'perawat', 'nya', 'ramah', 'semoga', 'istiqomah'] |
| 974 | pendingin ruangannya kurang | ['pendingin', 'ruangannya', 'kurang'] |
| 975 | pelayanan di igd sangat memuaskan | ['pelayanan', 'di', 'igd', 'sangat', 'memuaskan'] |
| 976 | pelayanan di igd sangat memuaskan | ['pelayanan', 'di', 'igd', 'sangat', 'memuaskan'] |
| 977 | sekarang disini ada treadmill test | ['sekarang', 'disini', 'ada', 'treadmill', 'test'] |
| 978 | saya merasa terbantu sekali dengan adanya layanan whatshap | ['saya', 'merasa', 'terbantu', 'sekali', 'dengan', 'adanya', 'layanan', 'whatshap'] |
| 979 | parkir nya luas dan petugas nya gerak cepat | ['parkir', 'nya', 'luas', 'dan', 'petugas', 'nya', 'gerak cepat'] |
| 980 | anak saya safira aiko nirmala cocok dengan pelayanan si X | ['anak', 'saya', 'safira', 'aiko', 'nirmala', 'cocok', 'dengan', 'pelayanan', 'si', 'queen', 'latifa'] |