jp.sourceforge.tokenizer
インタフェース 
Token
TokenInfo
クラス 
EofToken
Tokenizer
例外 
TokenizerException