General view

语言的组成

扫描(scanning/lexing/lexical analysis)

mountain-view

扫描器(scanner)

读入字符串流,将它们分割成单词(token),包括单个字符(如括号、逗号)、数字、字符串字面值、标识符
#