大模型技术在企业如何落地？这些落地场景值得一看！

最新推荐文章于 2024-09-14 16:22:37 发布

金汤肥牛面.

最新推荐文章于 2024-09-14 16:22:37 发布

阅读量509

点赞数 15

文章标签：人工智能大数据 langchain 开发语言 c++ 搜索引擎算法

本文链接：https://blog.csdn.net/qq_46094651/article/details/141261079

版权

AGI 新时代，企业如何用 AI 提升生产力，AI 如何和业务结合，AI 如何顺利落地。在跟上百家企业聊完后，这些应用场景你得知道了。

典型应用落地场景

大模型，我们说类似于一个斯坦福的大学生，拥有非常丰富的知识和理解能力。从大模型本身的具体能力看，主要分为（如下图）：语言理解（意图理解）、文本总结、文本生成、Function Call 和写代码的能力。

第一、对话助手落地场景

对话助手是最基础也是场景数量最多的应用形态，从数据获取的方式来看，主要有：

基于知识库数据源，先召回，再大模型回答，即 RAG 模式。
基于 API 查询，大模型的 FunctionCall，即对话过程中需要调用内外部系统获取信息。

实践过程中，也有许多场景会融合这两种能力。目前大部分企业的应用中，对话助手都仅对内提供服务，提升员工工作效率。实际上这类应用提供的价值更类似搜索，核心价值是高效信息传递，让用户能更快、更准的获取企业内部的非结构知识。同时，成熟度相对较高的应用基本都是即使答案错误也不会产生严重影响的场景，比如“产品使用手册问答”场景，对于大部分产品，并不会因为某个误操作导致严重后果，产品设计本身便会考虑误操作后的回退或者关键操作的重复确认。

第二、报告生成落地场景

和企业交流下来，才发现报告撰写需求如此旺盛，某些企业花在撰写报告上的人力和投入十分巨大，而报告又存在很大一部分“八股文”的套路。报告生成也自然成为了香饽饽场景。

企业场景主要以有固定模板的报告为主，并且报告基本都是几十页到几百页的长篇幅内容，涉及大量专业逻辑，想要通过一次大模型请求完成这种任务几乎是不可能的。为了生成复杂报告，可以采取分而治之的策略，即将总体问题分解为多个较简单的子问题，分别求解，并将这些子问题的解答整合到预定报告框架中。

在解决这些子问题时，并非全部适用大模型技术，因此需要结合多种技术手段，包括大型和小型模型、专家系统、专业业务系统等，以实现问题的全面解决。需要注意的是，此类应用同样不能保证生成结果的100%准确性，因此需要向用户提供易于追溯的生成逻辑和依据，以便用户对结果进行验证和审查。当然，即使一份报告内，不同章节内容的准确性要求也是不一样，用户可以专注于一些重点章节与重点指标和要素的结果确认。

第三、审核落地场景

审核类场景往往与生成类场景相伴相生，所以各类“报告生成”场景都会有对应的审核场景。

除了文档类数据需要审核，结构化业务数据也可以用大模型辅助进行审核。在和金融企业共建过程，比如：经营性贷款业务审核，这类场景主要借助大模型推理能力进行一些业务规则审核，如“抵押物是否属于房产”、“是否属于金融行业从业者”等等。从业务阶段来看，审核包含“事中”业务的审批、审核，也包含“事后”的审计、监督与质检。

从审核内容来看，包含专业业务逻辑审核、合规性和合法性审核、通用纠错（错别字、歧义等）。基于目前技术水平，审核同样只能是辅助性的，帮助审核者/提交者查漏补缺，比如：在提交审批前先进行自动审核，提交者可以判断是否需要修改，提高提交质量，降低打回概率。

第四、知识管理/非结构化数据治理落地场景

知识管理是企业数字化过程中，很大的一个课题。大模型正在重塑企业知识管理场景，从知识库构建，到知识的理解，大模型技术的语言能力大大降低了知识管理的落地门槛。

这类应用的本质是将非结构化数据向结构化/半结构化数据转换。原来的数据预处理和知识管理需要有非常专业的模型设计。现在，将大段相关文本给到大模型，大模型对语义的理解，可以直接将非结构化数据进行结构化提取和总结。不过，有一些对实时性、准确性要求很高的信息结构化场景，大模型方案不一定优于专用模型。

第五、数据分析落地场景

数据分析是各个行业都离不开的话题，通用数据分析辅助（技术上相关概念是 NL2SQL）。企业里针对我们对不同数据维度分析的诉求，通过 IT 研发的方式，成本无疑是巨大的。而引入大模型的编程能力，NL2SQL 能力，将大大降低对数据的分析成本。

然而目前基座模型在特定业务场景下效果差，特别是企业内数据库中都有至少几十张表的情况，所以目前离业务可用较远。这种场景下，模型微调是一种解决办法，而微调需要从零开始针对性准备大量微调数据（上千条）。当大模型能很好的获得结构化数据，并理解到表之间的业务逻辑关系，那么当领导随口咨询的一个指标，都能通过 SQL 进行计算，这无疑是一项值得投资的事。不过大模型数据分析+传统 BI 的方案，离真正的大规模普及还需要一些时日。

第六、企业超级助手落地场景

大部分企业内都至少有上百个系统，而这些系统的接口则更多。是否可以有一个超级助手，能接管企业内部的 API，实现按照自然语言，合理地触达各个系统。听着很魔幻，实际上，业界也认为 Agent 这种能力是大模型的未来。

长期来看，这种应用形态可能重构整个企业应用交互形态，对于各种长尾需求或不同企业之间的定制化需求，可以通过这种更自由的交互形式得到满足。

第七、代码落地场景

大模型的编码能力，是另一个经验我们的能力，一种是编程过程中的各种辅助，类似于写作辅助，另一种是程序开发自动化，类似于“报告生成”，直接生成一个完整的项目，然后由人进行调试验收。

在 C 端，相信大部分程序员或多或少使用 AI 辅助编码。我们能感受到大模型在0到1的功能上表现优异，但是无法很好地解决需求1-10的迭代过程。而这个也是我们企业中想要解决，和不断探索的地方。

大模型应用落地场景总结

以上是我们总结的企业 Top 类场景，对于高校、政府等，还有非常多的场景需要大家来探索。

相信 AGI 新时代，掌握了数据和 AI 的企业和组织，将迎来新的机遇和挑战。在这些场景的具体落地过程中，我们会遇到哪样的问题，有什么样的解法，欢迎关注我们下一篇文章。

那么，如何系统的去学习大模型LLM？

我在一线互联网企业工作十余年里，指导过不少同行后辈。帮助很多人得到了学习和成长。

作为一名热心肠的互联网老兵，我意识到有很多经验和知识值得分享给大家，也可以通过我们的能力和经验解答大家在人工智能学习中的很多困惑，所以在工作繁忙的情况下还是坚持各种整理和分享。

但苦于知识传播途径有限，很多互联网行业朋友无法获得正确的资料得到学习提升，故此将并将重要的AI大模型资料包括AI大模型入门学习思维导图、精品AI大模型学习书籍手册、视频教程、实战学习等录播视频免费分享出来。

所有资料 ⚡️ ，朋友们如果有需要全套《LLM大模型入门+进阶学习资源包》，扫码获取~

篇幅有限，部分资料如下：

👉LLM大模型学习指南+路线汇总👈

💥大模型入门要点，扫盲必看！
在这里插入图片描述
💥既然要系统的学习大模型，那么学习路线是必不可少的，这份路线能帮助你快速梳理知识，形成自己的体系。

👉大模型入门实战训练👈

💥光学理论是没用的，要学会跟着一起做，要动手实操，才能将自己的所学运用到实际当中去，这时候可以搞点实战案例来学习。
在这里插入图片描述

👉国内企业大模型落地应用案例👈

💥《中国大模型落地应用案例集》 收录了52个优秀的大模型落地应用案例，这些案例覆盖了金融、医疗、教育、交通、制造等众多领域，无论是对于大模型技术的研究者，还是对于希望了解大模型技术在实际业务中如何应用的业内人士，都具有很高的参考价值。 （文末领取）
在这里插入图片描述
💥《2024大模型行业应用十大典范案例集》 汇集了文化、医药、IT、钢铁、航空、企业服务等行业在大模型应用领域的典范案例。