企业级应用揭秘：大模型技术的落地场景全解析，非常详细收藏我这一篇就够了！

最新推荐文章于 2024-09-14 16:22:37 发布

AGI大模型老王

最新推荐文章于 2024-09-14 16:22:37 发布

阅读量906

点赞数 16

文章标签：人工智能数据库大数据 AI大模型大模型入门大模型学习大模型

本文链接：https://blog.csdn.net/2401_85390073/article/details/141759092

版权

AGI 新时代，企业如何用 AI 提升生产力，AI 如何和业务结合，AI 如何顺利落地。在跟上百家企业聊完后，这些应用场景你得知道了。

典型应用落地场景

大模型，我们说类似于一个斯坦福的大学生，拥有非常丰富的知识和理解能力。从大模型本身的具体能力看，主要分为（如下图）：语言理解（意图理解）、文本总结、文本生成、Function Call 和写代码的能力。

第一、对话助手落地场景

对话助手是最基础也是场景数量最多的应用形态，从数据获取的方式来看，主要有：

基于知识库数据源，先召回，再大模型回答，即 RAG 模式。
基于 API 查询，大模型的 FunctionCall，即对话过程中需要调用内外部系统获取信息。

实践过程中，也有许多场景会融合这两种能力。目前大部分企业的应用中，对话助手都仅对内提供服务，提升员工工作效率。实际上这类应用提供的价值更类似搜索，核心价值是高效信息传递，让用户能更快、更准的获取企业内部的非结构知识。同时，成熟度相对较高的应用基本都是即使答案错误也不会产生严重影响的场景，比如“产品使用手册问答”场景，对于大部分产品，并不会因为某个误操作导致严重后果，产品设计本身便会考虑误操作后的回退或者关键操作的重复确认。

第二、报告生成落地场景

和企业交流下来，才发现报告撰写需求如此旺盛，某些企业花在撰写报告上的人力和投入十分巨大，而报告又存在很大一部分“八股文”的套路。报告生成也自然成为了香饽饽场景。

企业场景主要以有固定模板的报告为主，并且报告基本都是几十页到几百页的长篇幅内容，涉及大量专业逻辑，想要通过一次大模型请求完成这种任务几乎是不可能的。为了生成复杂报告，可以采取分而治之的策略，即将总体问题分解为多个较简单的子问题，分别求解，并将这些子问题的解答整合到预定报告框架中。

在解决这些子问题时，并非全部适用大模型技术，因此需要结合多种技术手段，包括大型和小型模型、专家系统、专业业务系统等，以实现问题的全面解决。需要注意的是，此类应用同样不能保证生成结果的100%准确性，因此需要向用户提供易于追溯的生成逻辑和依据，以便用户对结果进行验证和审查。当然，即使一份报告内，不同章节内容的准确性要求也是不一样，用户可以专注于一些重点章节与重点指标和要素的结果确认。

第三、审核落地场景

审核类场景往往与生成类场景相伴相生，所以各类“报告生成”场景都会有对应的审核场景。

除了文档类数据需要审核，结构化业务数据也可以用大模型辅助进行审核。在和金融企业共建过程，比如：经营性贷款业务审核，这类场景主要借助大模型推理能力进行一些业务规则审核，如“抵押物是否属于房产”、“是否属于金融行业从业者”等等。从业务阶段来看，审核包含“事中”业务的审批、审核，也包含“事后”的审计、监督与质检。

从审核内容来看，包含专业业务逻辑审核、合规性和合法性审核、通用纠错（错别字、歧义等）。基于目前技术水平，审核同样只能是辅助性的，帮助审核者/提交者查漏补缺，比如：在提交审批前先进行自动审核，提交者可以判断是否需要修改，提高提交质量，降低打回概率。

第四、知识管理/非结构化数据治理落地场景

知识管理是企业数字化过程中，很大的一个课题。大模型正在重塑企业知识管理场景，从知识库构建，到知识的理解，大模型技术的语言能力大大降低了知识管理的落地门槛。

这类应用的本质是将非结构化数据向结构化/半结构化数据转换。原来的数据预处理和知识管理需要有非常专业的模型设计。现在，将大段相关文本给到大模型，大模型对语义的理解，可以直接将非结构化数据进行结构化提取和总结。不过，有一些对实时性、准确性要求很高的信息结构化场景，大模型方案不一定优于专用模型。

第五、数据分析落地场景

数据分析是各个行业都离不开的话题，通用数据分析辅助（技术上相关概念是 NL2SQL）。企业里针对我们对不同数据维度分析的诉求，通过 IT 研发的方式，成本无疑是巨大的。而引入大模型的编程能力，NL2SQL 能力，将大大降低对数据的分析成本。

然而目前基座模型在特定业务场景下效果差，特别是企业内数据库中都有至少几十张表的情况，所以目前离业务可用较远。这种场景下，模型微调是一种解决办法，而微调需要从零开始针对性准备大量微调数据（上千条）。当大模型能很好的获得结构化数据，并理解到表之间的业务逻辑关系，那么当领导随口咨询的一个指标，都能通过 SQL 进行计算，这无疑是一项值得投资的事。不过大模型数据分析+传统 BI 的方案，离真正的大规模普及还需要一些时日。