Programas por ctokenizer.sf.net

O CTokenizer aceita a sintaxe C++ como entrada e produz um vetor de objetos CToken, que contêm uma sequência de token e um tipo de token (n enumerado), que podem ser usados para analisar a entrada.