Deep Research技术盘点！比RAG更高级的LLM应用范式

最新推荐文章于 2025-03-26 10:15:45 发布

小天才学习机打游戏

最新推荐文章于 2025-03-26 10:15:45 发布

阅读量1.2k

点赞数 11

文章标签：人工智能深度学习机器学习 linux 运维

本文链接：https://blog.csdn.net/m0_59164520/article/details/145887750

版权

OpenAI的Deep Research工具横空出世后，各大厂商都推出了自研的Deep Research工具。所谓Deep Research，是和普通搜索比较的，简单的RAG检索生成一般只有一轮检索。然而Deep Research可以像人类一样，根据一个主题不断的检索，分析，再检索，再分析，直到达到研究目的。从这这个角度上讲，它本质上就是一个升级版的RAG应用，利用ReAct/Plan And Solve等模式构建的垂域 Agent，具备文章分解规划生成、资讯获取分析的能力。

原理上讲很简单，但想实现一个私有的满足自身业务需要的成品，其实际工程细节以及效果优化却相当复杂，因此，一些脚手架的项目或者成品的开发平台就显得尤为重要，这就和RAG一样，将会有越来越多的这样的开发框架出现。

今天，就介绍几款 Deep Research 开源实现，代表两种实现思路，一种是基于现有的编排框架实现，如Langchain Langgraph，另一种是针对deep research的特点专门设计开发。通过它们不仅能够快速构建deep research应用，也能了解这些框架的实现细节以及具体的选型，比如用什么搜索，用什么存储，提示词是什么等等，这对于我们自己实现非常具有参考作用。

1. Langchain Open DeepResearch

它是LangChain官方的演示实现，基于 LangGraph 构建整个处理流程。通过集成多种 API，如 Tavily 、Perplexity，实现搜索和信息收集。用户可以设置每个章节的搜索深度，包括写作、反思、搜索和重写的迭代次数，同时可以对报告章节的计划提供反馈，并迭代至满意为止。

其使用到的Prompt：

https://github.com/langchain-ai/open_deep_research/blob/main/src/open_deep_research/prompts.py

项目地址：https://github.com/langchain-ai/open_deep_research

同类型的有Dify等框架编排的Deep Research应用。

2. Open Deep Research

Open Deep Research是众多垂域实现的一种。它解构了DeepSearch的过程，支持自动和半自动的Research过程。支持多种 API 接口，不仅能够检索外网信息，还能检索企业内部资料，进行汇总分析。用户可以根据需求选择不同的 AI 平台，包括 Google 、OpenAI 、Anthropic 、DeepSeek 等，甚至可以接入本地模型，实现个性化研究。

它包含了Deep ReSearch标准的的三个步骤：

搜索结果检索：通过 Google Custom Search 或Bing Search API（可配置）获取指定搜索词的全面搜索结果。
内容提取：利用 JinaAI 提取和处理选定的搜索结果内容，确保信息的准确性和相关性。
报告生成：使用用户选择的 AI 模型（如 Gemini 、GPT-4 、Sonnet 等）对整理好的搜索结果和提取的内容进行详细报告的生成，提供针对用户自定义提示的深入分析和见解。

以下是生成报告时使用的Prompt：

You are a research assistant tasked with creating a comprehensive report based on multiple sources.   
The report should specifically address this request: "${userPrompt}"  
  
Your report should:  
1. Have a clear title that reflects the specific analysis requested  
2. Begin with a concise executive summary  
3. Be organized into relevant sections based on the analysis requested  
4. Use markdown formatting for emphasis, lists, and structure  
5. Integrate information from sources naturally without explicitly referencing them by number  
6. Maintain objectivity while addressing the specific aspects requested in the prompt  
7. Compare and contrast the information from each source, noting areas of consensus or points of contention.   
8. Showcase key insights, important data, or innovative ideas.  
  
Here are the source articles to analyze:  
  
${articles  
  .map(  
    (article) => `  
Title: ${article.title}  
URL: ${article.url}  
Content: ${article.content}  
---  
`  
  )  
  .join('\n')}  
  
Format the report as a JSON object with the following structure:  
{  
  "title": "Report title",  
  "summary": "Executive summary (can include markdown)",  
  "sections": [  
    {  
      "title": "Section title",  
      "content": "Section content with markdown formatting"  
    }  
  ]  
}  
  
Use markdown formatting in the content to improve readability:  
- Use **bold** for emphasis  
- Use bullet points and numbered lists where appropriate  
- Use headings and subheadings with # syntax  
- Include code blocks if relevant  
- Use > for quotations  
- Use --- for horizontal rules where appropriate  
  
Important: Do not use phrases like "Source 1" or "According to Source 2". Instead, integrate the information naturally into the narrative or reference sources by their titles when necessary.`

生成的报告可以下载或者存储在知识库中，但它的高质量搜索源不足，缺乏Research验证和迭代过程，因此在质量上还有改进的空间，但整体过程清晰，很适合在此基础上不断改进完善。

项目地址：https://github.com/btahir/open-deep-research

如何学习大模型 AI ？

由于新岗位的生产效率，要优于被取代岗位的生产效率，所以实际上整个社会的生产效率是提升的。

但是具体到个人，只能说是：

“最先掌握AI的人，将会比较晚掌握AI的人有竞争优势”。

这句话，放在计算机、互联网、移动互联网的开局时期，都是一样的道理。

我在一线互联网企业工作十余年里，指导过不少同行后辈。帮助很多人得到了学习和成长。

我意识到有很多经验和知识值得分享给大家，也可以通过我们的能力和经验解答大家在人工智能学习中的很多困惑，所以在工作繁忙的情况下还是坚持各种整理和分享。但苦于知识传播途径有限，很多互联网行业朋友无法获得正确的资料得到学习提升，故此将并将重要的AI大模型资料包括AI大模型入门学习思维导图、精品AI大模型学习书籍手册、视频教程、实战学习等录播视频免费分享出来。

在这里插入图片描述