Programas por ctokenizer.sf.net

CTokenizer aceita a sintaxe C++ como entrada e produz um vetor de objetos CToken, que contêm uma corda simbólica e um (n enumerado) tipo de token, que pode então ser usado para analisar a entrada.