UCC--C语言词法分析

C89中定义词法有：关键字，标识符，常量，串字符值，算符，标点符号。
关键字：共有32个关键字。标识符，定义如下：非数字字符，标识符 非数字字符，标识符 数字字符。3种定义。 非数字字符的定义：A~Z,a~z,_。
常量：浮点常量，整数常量，枚举常量，字符常量。字符常量：'a'，'\n'，分为字符和转义两种。
串字面值："abdcd"，通常成为字符串常量。
算符：+ - / %等。
标点符号：{} [] , () * ; = ... #

以上是对词法的定义，C代码中出现的任何字符或字符串都必须要符合上述规定。

UCC对C文件先进行词法分析，分析出单词。单词在UCC里面的表达是记号。
经过预处理后，C文件可以看做是字符流，由一个个字符组成。词法分析就是把字符流变成一个个单词，也就是记号。单词的识别采用最长匹配原则，如++不会翻译成+号。
UCC利用系统的内存映射，把文件映射到内存中，文件被看做是一个无符号字符数组。并在数组的最后加特殊的标记符号。当分析到这个字符文件就结束。
记号的表示，记号用整形来表示：