Sendo assim, no momento da compilação, a função do Analisador Léxico é dividir o código-fonte em unidades menores (tokens) e reconhecer as palavras-chave, identificadores, operadores e outros símbolos, fazendo assim o processo de Identificação e Tokenização do código, garantindo que as instruções foram digitadas seguindo corretamente o vocabulário da linguagem.