構文解析:トークン
構文解析
における
単位データ
。
トークンは
予約語
、
ラベル
、
識別子
、
特殊記号
、
数
などから成る。
トークン
（
token
）
https://ja.wikipedia.org/wiki/トークン