Table des matières:
Définition - Que signifie l'analyse lexicale?
L'analyse lexicale est un concept qui est appliqué à l'informatique d'une manière très similaire à celle qu'il applique à la linguistique. Essentiellement, l'analyse lexicale signifie regrouper un flux de lettres ou de sons en ensembles d'unités qui représentent une syntaxe significative. En linguistique, cela s'appelle l'analyse, et en informatique, il peut être appelé analyse ou tokenisation.
Techopedia explique l'analyse lexicale
L'idée de l'analyse lexicale en informatique est que l'analyse lexicale décompose les flux en «lexèmes» où un jeton représente l'unité de base du sens. Les jetons sont enchaînés de telle manière que le compilateur de langage doit revenir en arrière et les isoler pour implémenter les bonnes instructions informatiques. Fondamentalement, les humains et les ordinateurs font une analyse lexicale, mais les ordinateurs le font différemment et de manière beaucoup plus technique. La façon dont les ordinateurs effectuent l'analyse lexicale n'a pas besoin d'être transparente pour les humains - elle doit simplement être programmée dans le système informatique. Les programmes qui font l'analyse lexicale en informatique sont souvent appelés lexers, tokenizers ou scanners.
