Chain of Note-CoN增强检索增强型语言模型的鲁棒性

论文地址：Enhancing Robustness in Retrieval-Augmented Language Models

摘要

检索增强型语言模型（Retrieval-Augmented Language Models，RALMs）在大型语言模型的能力上取得了重大进步，特别是在利用外部知识源减少事实性幻觉方面。然而，检索到的信息的可靠性并不总是有保证的。检索到无关数据可能导致回答偏离正轨，甚至可能使模型忽略其固有的知识，即使它拥有足够的信息来回答查询。此外，标准的RALMs通常难以评估它们是否拥有足够的知识，包括内在知识和检索到的知识，以提供准确的答案。在知识缺乏的情况下，这些系统理想情况下应该以“未知”回应无法回答的问题。

为了应对这些挑战，我们引入了CHAIN-OF-NOTING（CON），这是一种新颖的方法，旨在提高RALMs在面对噪声、无关文档和未知场景时的鲁棒性。CON的核心思想是为检索到的文档生成顺序阅读笔记，从而彻底评估它们与给定问题的相关性，并将这些信息整合以形成最终答案。我们使用ChatGPT为CON创建训练数据，随后在LLaMa-2 7B模型上进行了训练。

我们在四个开放领域问答基准上的实验表明，装备了CON的RALMs显著优于标准的RALMs。特别是，CON在完全噪声检索文档的情况下，EM分数平均提高了+7.9，在实时问题超出预训练知识范围的情况下的拒绝率提高了+10.5。

Introduction

<