- 博客(2)
- 收藏
- 关注
RSS订阅原创 Datawhale AI夏令营 Task3 Use
本文是Datawhale AI夏令营第三期多模态RAG方向的进阶教程，针对多模态RAG图文问答挑战赛的baseline方案不足，提出了系统的优化路径，旨在提升问答准确性与溯源精度。一、赛题与baseline回顾赛题目标：构建可溯源的多模态RAG系统，处理图文混排的PDF财报，回答问题并标注答案来源（文件名+页码）。评估标准：答案内容相似度（0.5分）、文件名匹配（0.25分）、页码匹配（0.25分）。baseline不足文档解析粗糙（PyMuPDF仅提取纯文本，丢失表格、图片等关键信息）；
2025-08-10 16:42:04
546
原创 Datawhale AI夏令营 Task2 Use
一、项目核心目标与要求本次赛题的核心是构建可溯源的多模态RAG系统，处理图文混排的PDF财报，回答用户问题并标注答案来源（文件名+页码）。多模态理解：需处理文本、图表（图片）等信息；可溯源：答案必须关联具体PDF文件及页码；检索增强生成（RAG）：基于外部知识库（PDF）生成答案，避免幻觉。二、Baseline方案概述Baseline分为**离线预处理（构建知识库）和在线推理（生成答案）**两个核心阶段，目标是快速跑通“解析-检索-生成”流程。1. 离线预处理：构建知识库目标。
2025-08-10 16:17:39
846
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人