Skip to content
Latchkey

Lexer - CI/CD用語集の定義

lexer (tokenizer) はソースを一文字ずつ読み取り、それらを token (キーワード、識別子、数値、演算子) にまとめ、空白とコメントを破棄します。compiler の最初のステージであり、その token ストリームを parser に渡します。

関連ガイド