词法

大凡语言，不管是人类使用的自然语言还是计算机使用的程序语言，基本单位都是一个个的单词，不同的语言有着不同的单词库和构词规则，即为词法。
本文基于ECMAScript5语言规范对JavaScript语言的词法进行说明。

如下例所示，程序的源代码由字符序列构成。

console.log("the program is running");

字符序列可以分解成由分隔符号分隔的一组标记(token)序列。 标记(Token)相当于自然语言中的单词，是程序构成元素中的最小有意义单元。 标记(Token)再组合成表达式、语句以至整个程序。

JavaScript中的标记(token)可以分为以下几种类型：

• 标识符
• 常数
• 运算符号
• 分隔符号
• 关键字　

上面这段代码在词法分析中即会被分解成以下多个标记(Token)：

下面我们先介绍一下JavaScript语言的字符集以及注释的格式，然后再对上面的各类标记(token)分别进行说明。

字符集定义了程序源代码所能使用字符的一个集合。 JavaScript程序内部采用Unicode字符集、其脚本文件需保存为utf8格式。

注释用来在源码中增加解释性的信息，可以帮助阅读和理解源码。 有两种生成注释的方法。

• 第一种是单行注释，使用//

  ，会将该行中符号以后的文本都视为注释。

• 第二种是多行注释，使用/* */

  ，其包括的文本无论是否跨行都视为注释。

注释本身通常并不作为标记进行处理。

标识符就是一个名字，用来对变量、常量、函数以及类型等进行命名。

标识符可以包含以下文字，但第一个文字必须是字母、下划线（_）或者美元（$）符号，字母大小写区分。

• 大写字母(A～Z)
• 小写字母ﾄ(a～z)
• 数字(0～9)
• 符号($、_)
• Unicode转义序列

常数是直接记述在源代码中的值对象，包含以下分类：

运算符号是表示运算的一类特殊符号，例如，加号与乘号。运算符操作的值称为运算对象。 运算符号包含以下分类：

以下关键字都是保留字，不可用于变量，常量，函数，方法，或对象的标识符。