O processo pelo qual um fluxo de caracteres é agrupado em uma série de itens lexicais, ou fichas, e todos os dados disponíveis de dicionário é associado com os itens lexicais. Análise lexical compreende três etapas separadas: segmentação, a normalização e a anotação.