3.3 自上而下分析

思维导图： 

自上而下分析：基础、挑战与解决方案

在编译器设计中，自上而下分析是一种将输入程序文本转化为语法树的方法，它从文法的开始符号出发，尝试匹配输入串，以构建一棵完整的分析树。本篇博客将深入探讨自上而下分析的基本概念、常见挑战以及有效的解决策略。

自上而下分析的基本方法

自上而下分析的核心思想是从文法的根结点（开始符号）出发，逐步向下扩展，直到匹配整个输入串。在这个过程中，分析器尝试为给定的输入串寻找一个最左推导。这种方法本质上是试探性的，涉及到反复使用不同的产生式来寻求与输入串匹配的过程。

挑战

1. 左递归：自上而下分析面临的一个主要问题是左递归的存在，即文法中存在形如 A → Aα 的产生式。左递归会导致分析器陷入无限循环，因为在尝试匹配输入串时，分析器可能在没有消耗任何输入符号的情况下，不断地递归调用自身。
2. 回溯：当分析器在某个分支上取得“暂时的成功”时，这种成功可能只是假象。如果后续的输入无法匹配，分析器需要回溯到之前的决策点并尝试其他选项。这种回溯机制大大降低了分析的效率。
3. 效率问题：试探和回溯的过程意味着分析器可能需要穷尽所有可能的分析路径，这在实践中代价昂贵，效率低下。

解决方案

1. 消除左递归：通过文法转换，将左递归产生式改写为非左递归的形式，从而避免无限递归的问题。
2. 提左因子：为减少回溯，可以通过提取产生式的共同左因子，将选择的决策推迟到足够多的输入被消耗后再做，这有助于减少不必要的回溯。
3. 使用LL(1)文法：设计一种特殊的上下文无关文法，即LL(1)文法，它对每个非终结符的每个产生式只需要向前看一个符号就可以无歧义地决定使用哪个产生式进行扩展。这种文法适合于自上而下分析，且不需要回溯。

错误恢复

在自上而下分析中，错误恢复是另一个重要的考虑点。它涉及到当分析器遇到语法错误时，如何采取措施以便继续分析过程，尝试找到更多的错误，而不是在第一个错误处停止。有效的错误恢复策略能够提高编译器的鲁棒性和用户体验。

结论

自上而下分析为编程语言的语法分析提供了一种直观的方法。通过采用特定的文法变换和分析策略，如消除左递归、提左因子和设计LL(1)文法，可以有效地克服其固有的挑战，实现高效且可靠的语法分析。这些技术和方法的应用，使得自上而下分析不仅在理论上有意义，而且在实际的编译器设计中也具有广泛的应用价值。

理解LL(1)文法：自上而下分析的关键

自上而下分析是编译器设计中的一种基本方法，用于将输入的程序代码转换成对应的语法树。为了构造一个高效且无需回溯的自上而下分析算法，关键步骤包括消除左递归和确保文法满足LL(1)的条件。本节将深入探讨LL(1)文法的定义、特性以及其在自上而下分析中的应用。

避免回溯的条件

自上而下分析的挑战之一是如何避免在分析过程中的回溯。理想情况下，分析器能够根据当前面对的输入符号准确地决定使用哪个产生式进行推导，从而避免不必要的试探和回溯。实现这一目标的关键是确保文法满足特定的条件，即LL(1)条件。

LL(1)文法的定义

LL(1)文法是一种特殊的上下文无关文法，它允许从左到右扫描输入串、产生最左推导，并且在决定如何扩展当前非终结符时，只需要向前看一个输入符号。为了成为LL(1)文法，文法必须满足以下两个条件：

1. 非交叉的开始符号集合：对于任何非终结符的所有选择，它们的开始符号集合（FIRST集合）两两不相交。
2. 当选择可以推导出空串时的条件：如果非终结符的某个选择可以推导出空串（ε），那么该选择的开始符号集合与非终结符的后继符号集合（FOLLOW集合）也不相交。

示例与计算FIRST和FOLLOW集合

通过计算文法中每个非终结符的FIRST和FOLLOW集合，我们可以判断文法是否满足LL(1)条件。例如，对于简单的表达式文法：

E → TE'
T → FT'
F → (E) | id
E' → +TE' | ε
T' → *FT' | ε

可以计算出各个非终结符的FIRST和FOLLOW集合，并据此判断该文法是否为LL(1)文法。

LL(1)文法的优点

LL(1)文法的主要优点在于其清晰的分析路径和无需回溯的特性，这使得基于LL(1)文法的分析器设计相对简单且高效。此外，LL(1)文法的这些性质还意味着文法是无二义的并且不含左递归，进一步简化了分析器的实现。

构造预测分析表

基于LL(1)文法，我们可以构造一个预测分析表，该表为分析器提供了一个系统的方法来决定在遇到特定输入符号时应当使用哪个产生式进行扩展。这种方法不仅提高了分析的效率，还大大简化了编译器的实现。

总结

LL(1)文法在自上而下分析中起到了核心作用，它通过提供明确的分析指南和规则，使得编写无需回溯的语法分析器成为可能。理解和应用LL(1)文法是编译器设计中的一个重要技能，能够帮助开发者构建更高效、更可靠的编译器前端。

递归下降的预测分析解析

递归下降预测分析是自上而下分析方法中的一种，特别适用于LL(1)文法。这种方法通过为每个非终结符编写一个分析过程，结合递归调用，实现了对输入字符串的分析和语法树的构建。本节通过一个Pascal语言类型子集的例子，展示如何构造递归下降的预测分析程序。

基本原理

• 递归下降：分析过程是递归的，每个非终结符对应一个分析过程。开始符号的过程首先被调用，然后根据产生式的需要递归调用其他过程。
• 预测分析：通过查看当前输入符号（lookahead），预测哪个产生式将被用来继续分析过程。LL(1)文法的特性保证了这一预测的准确性。

示例文法及分析器构造

考虑以下Pascal类型定义的子集文法：

type → simple | ↑id | array [simple] of type
simple → integer | char | num .. num

此文法是LL(1)的，因为每个产生式的选择可以通过查看下一个输入符号来唯一确定。

分析器组件

• match(terminal t)：检查当前输入符号是否匹配期望的终结符t。如果匹配，读取下一个输入符号；否则，报错。
• type()：处理type非终结符。根据当前的lookahead，决定调用simple()，处理↑id或array [simple] of type。
• simple()：处理simple非终结符。根据lookahead，匹配integer、char或num .. num。

分析过程

1. 初始化lookahead：分析开始时，通过nextToken()初始化lookahead为输入字符串的第一个符号。
2. 递归调用：以type()为入口，根据lookahead选择相应的分支进行递归调用。
3. 符号匹配：使用match()进行终结符的匹配，并适当推进输入指针。

优点与局限

• 优点：递归下降预测分析器简单直观，易于实现，尤其适合LL(1)文法。
• 局限：对于含有左递归的文法不适用，且在处理一些复杂的文法时可能需要较为复杂的控制逻辑。

结论

递归下降预测分析是一种强大的编译器前端技术，能够清晰地将输入程序映射到其语法结构上。通过精心设计的递归过程和准确的预测逻辑，可以有效地实现语法分析，为后续的编译过程打下坚实的基础。

在这一节中，我们将探索非递归的预测分析器，这是一种在编译器设计中用于语法分析的方法。与传统的递归下降分析器相比，非递归预测分析器不依赖于递归调用，而是显式地使用一个栈来跟踪分析进度。这种方法的核心在于如何选择正确的产生式来扩展非终结符，这通过查找一个预先构建的分析表来实现。

非递归预测分析器的构成

一个标准的非递归预测分析器包括四个主要组成部分：

1. 输入缓冲区：包含待分析的字符串，以特殊符号$标记结束，表示输入字符串的结束。
2. 栈：存放文法符号串，其底部始终是$符号，表示栈的底部。初始时，栈仅包含文法的开始符号，位于$之上。
3. 分析表：一个二维数组M[A, a]，其中A代表非终结符，a代表终结符或结束符$。分析表指导分析器如何根据当前上下文选择产生式。
4. 输出流：分析器的输出，通常是输入字符串的最左推导过程。

工作流程

非递归预测分析器的工作过程基于当前栈顶符号X和输入符号a，进行以下判断：

1. 完全匹配：如果X和a都是$，则分析成功完成。
2. 符号匹配：如果X=a且不为$，则弹出X并移动输入指针到下一符号。
3. 终结符不匹配：如果X是终结符但与a不匹配，报告语法错误并尝试错误恢复。
4. 非终结符处理：如果X是非终结符，查分析表M[X,a]。若存在产生式，如X→UVW，则用WVU替换栈顶的X，并保持U为栈顶符号，同时输出或执行产生式指定的动作。若分析表中的条目表示错误，则同样调用错误恢复例程。

示例分析

考虑文法和对应的预测分析表，分析器通过追踪输入串的最左推导来验证输入串是否属于文法生成的语言。通过反复应用上述步骤，分析器能够有效地处理输入串，逐步展开或匹配栈顶符号，直至整个输入串被成功分析或遇到无法恢复的错误。

小结

非递归预测分析器提供了一种高效的语法分析方法，特别适用于需要快速且内存效率高的编译环境。通过使用表驱动的方法，它避免了递归调用的开销，同时提供了灵活的错误恢复机制。这种分析器的设计和实现虽然需要仔细构建分析表，但它的效率和实用性使其成为编译器设计中广泛使用的技术之一。

构建非递归预测分析器的关键在于理解和实现预测分析表，它是自顶向下语法分析过程的核心。本节将深入探讨如何为给定的文法构造这样一个预测分析表，从而实现一个高效的非递归预测分析器。

预测分析表的构造

预测分析表是一个二维表，其中行表示文法中的非终结符，列代表输入符号（包括终结符和结束标记$）。表的每个条目M[A, a]定义了当分析器遇到非终结符A作为栈顶符号且当前输入符号为a时应采取的动作，即用哪个产生式替换A。

构造预测分析表的过程遵循以下步骤：

1. 初始化分析表：首先，为文法的每个非终结符A和每个可能的输入符号a创建一个条目M[A, a]。初始时，所有条目都标记为错误（通常使用空白表示），表示在这种情况下没有定义动作。

2. 填充分析表：对文法中的每个产生式A → α进行如下操作：

   • 对于FIRST(α)中的每个终结符a，将产生式A → α加入到M[A, a]。这意味着如果当前输入符号是a，分析器应选择用α展开A。
   • 如果ε（空串）在FIRST(α)中，则需要进一步考虑FOLLOW(A)。对于FOLLOW(A)中的每个符号b（包括$），将产生式A → α加入到M[A, b]，表示即使当前输入符号不直接匹配，也可以通过展开A为α来继续分析。

这个过程确保了预测分析器能够根据当前的上下文（即栈顶的非终结符和输入符号）选择正确的产生式进行分析。

处理特殊情况

在构造预测分析表时，可能会遇到一些特殊情况，如ε产生式和FOLLOW集合的处理。ε产生式的存在要求我们仔细考虑当输入符号在FOLLOW(A)中但不在FIRST(α)中时的情况。这时，A可以通过产生ε来匹配，因此相关的产生式也应加入到分析表中。

面对多重定义的条目

理想情况下，预测分析表的每个条目应该只有一个产生式。然而，在某些文法中，可能存在多个产生式都适用的情况，这导致分析表中的条目有多重定义。这种情况通常发生在文法存在左递归或文法本身具有二义性时。

为了解决这个问题，可以采取几种策略：

• 文法变换：通过消除左递归和提取左因子等技术，尝试转换文法以消除多重定义的条目。
• 手动调整：在某些情况下，可以根据语言的特定需求手动解决多重定义的问题，虽然这可能会牺牲一些通用性。

最终，构造预测分析表的目的是为了实现一个能够准确识别语言句子的非递归预测分析器。虽然这个过程可能在遇到复杂文法时显得有些挑战，但通过细致的分析和适当的文法调整，通常可以实现高效的分析器设计。

 

错误恢复是编译器设计中的一个重要方面，尤其是在语法分析阶段。一个好的编译器不仅能够识别程序中的错误，还能在可能的情况下从错误中恢复，以便继续分析程序的其余部分，从而提供更多有用的反馈给程序员。在预测分析中，错误恢复尤为重要，因为它直接影响编译器能够提供的错误信息质量和数量。

预测分析中的错误恢复策略

预测分析的错误恢复通常依赖于能够识别错误并尽快从错误状态中恢复的机制。以下是几种常见的错误恢复策略：

1. 紧急模式恢复：当检测到错误时，分析器会丢弃输入符号，直到找到一个预定义的同步符号集中的符号。这种方法的有效性取决于同步符号集的选择，其目的是快速恢复到一个稳定的分析状态。

2. 基于同步符号的恢复：选择合适的同步符号至关重要，以确保分析器能够在错误发生后快速恢复。一般来说，可以选择FOLLOW集中的符号作为同步符号，这样做的原理是，FOLLOW集中的符号出现时，可以安全地假设前面的非终结符已经被正确处理。

3. 产生式替换：如果一个非终结符可以推导出空串，当遇到错误时，可以考虑将其替换为产生空串的产生式。这样，分析器可以绕过一些错误，继续分析后面的输入。

4. 栈顶符号的调整：如果栈顶的终结符与当前的输入符号不匹配，一种简单的恢复策略是弹出栈顶符号或跳过当前的输入符号，然后继续分析。

错误信息的报告

报告错误的位置和可能的原因对程序员来说非常重要。编译器应当尽可能提供精确的错误位置和有助于理解错误本质的信息。一般来说，编译器会标出检测到错误的源代码位置，并提供一个描述错误性质的消息。

综合考虑

虽然上述策略可以在很大程度上帮助从错误中恢复，但没有哪一种策略是完美的。错误恢复的有效性取决于多种因素，包括文法的复杂性、同步符号的选择以及编译器设计者对特定程序设计语言错误模式的理解。理想的错误恢复机制应该能够准确报告错误，尽量减少因错误恢复导致的后续伪错误，同时又不会过分降低编译器处理正确程序的速度。

综上所述，预测分析中的错误恢复是一个综合性的挑战，需要编译器设计者仔细权衡各种因素，以提供既有效又实用的错误处理机制。

 

 

 

 

 

 

 

 总结：

重点

1. 非递归预测分析器：它使用显式栈而不是递归调用的栈来跟踪分析过程，核心在于根据当前输入和栈顶符号查找预测分析表以决定下一步动作。

2. 预测分析表的生成：预测分析表是构造非递归预测分析器的关键，表中的每个条目指示了遇到特定非终结符和输入符号时应用的产生式。构造过程依赖于FIRST和FOLLOW集合的准确计算。

3. 错误恢复：在语法分析过程中，能够有效恢复错误是编译器友好性的重要指标。预测分析器使用特定的策略（如紧急模式恢复和基于同步符号的恢复）来从错误中恢复，并尽可能继续分析剩余的输入。

难点

1. 预测分析表的构造：正确计算FIRST和FOLLOW集合，以及处理产生ε的产生式和选择合适的同步符号集合，是构造预测分析表的难点之一。

2. 处理空产生式（ε-产生式）：在生成预测分析表时，处理空产生式和它们对FIRST和FOLLOW集合的影响比较复杂。

3. 错误恢复策略的设计：设计一个既能准确报告错误位置和原因，又能有效从错误中恢复，同时避免过多伪错误报告的恢复策略是挑战性的。

易错点

1. 误解FIRST和FOLLOW集合的概念：对FIRST和FOLLOW集合的误解可能导致预测分析表构造错误，特别是忽视了在某些情况下ε的处理。

2. 多重定义的条目处理：在预测分析表中正确处理多重定义的条目（当同一非终结符和输入符号对应多个产生式时）需要仔细的规划和理解文法的性质。

3. 错误恢复中的同步符号选择：在错误恢复过程中，错误地选择同步符号可能导致分析器跳过太多有效信息或无法从错误中有效恢复，这是实现错误恢复时的一个常见易错点。

总的来说，非递归预测分析器的实现、预测分析表的构造以及错误恢复的设计都是编译原理中既关键又具挑战性的部分，需要深入理解文法的性质、分析算法的细节以及编译器用户的需求。