jp.sourceforge.tokenizer
インタフェース
Token
TokenInfo
クラス
EofToken
Tokenizer
例外
TokenizerException