高级语言源程序内部的几个概念

• token、关键字、标识符、操作符、分隔符和字面量

token

• token 是构成源程序的基本不可再分割的单元，编译器编译程序的第一步就是将源程序分割为一个个独立的token，这个过程就是词法分析

• go语言的token可以分为关键字、标识符、操作符、分隔符和字面常量等