Posted by Materi Teknik Informatika • Informasi Teknologi Informasi • Digital Marketing on 3/31/2015
 
String Tokenizer pada intinya memanggil fungsi pembacaan string yang dipisahkan berdasarkan spasi dengan cara memanggil import StringTokenizer.
Berikut contoh String Tokenizer dalam Java Netbeans :
import java.util.Scanner;
import java.util.StringTokenizer;
 
public class StringTokenizers {
 
    public static void main(String[] args)
    {
        Scanner input = new Scanner(System.in);
 
        System.out.print("Masukan Kalimat : ");
        String sentence = input.nextLine();
 
 
        StringTokenizer objectToken = new StringTokenizer(sentence);
        int token_count = 1;
 
        System.out.println();
        System.out.println("-- Hasil Kalimat yang dihasilkan di hitung berdasarkan Token --");
        System.out.println();
 
       while(objectToken.hasMoreTokens())
       {
           System.out.println(objectToken.nextToken() + " - Token # " + token_count);
           token_count++;
 
       }
 
    }
 
}
Berikut hasil output String Tokenizer :