大模型应用开发的主流架构:大模型与多个小模型的协同模式!

架构是灵活多变的,切勿钻牛角尖

前排提示,文末有大模型AGI-CSDN独家资料包哦!

在上一篇文章中讲到大模型的能力问题,虽然说经过这一两年时间的发展,大模型的能力已经得到巨大的提升,甚至有些模型已经超出了意料。

但大模型在工程化落地中依然面临着很多问题,比如说成本问题,技术问题,以及能力问题,毕竟大模型并不是万能的,某些模型虽然在某些方面表现较强,但并不是无所不能的。

因此,该怎么解决这个问题呢?‍‍

这时 通用大模型+多个垂直小模型的解决方案就出现了。‍

大模型+多个小模型‍

大家看到大模型+多个小模型,会不会就认为大模型就是参数量庞大的模型,多个小模型就是参数量较小的模型?

其实这里说的大模型+多个小模型并不是从我们传统意义从技术角度理解的模型,而是从业务角度上的模型。‍‍‍‍‍‍‍

这里的大模型指的是你们公司主要业务依赖的模型,比如一家做AIGC业务的企业,它的大模型肯定是以生成业务为主;但生成式范围那么大,不可能有一家公司能维护如此多的模型,肯定是以一两个业务方向为主,其它的为辅。‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍

比如说一家公司做AI音乐生成业务,但如果它还想做视频处理和文字处理的业务,这时它可能就没有那么多资金,技术和时间来维护如此多的模型。‍‍‍‍‍‍‍

而多个垂直小模型也并不是说一定是体量小的模型,而是那种非主要业务的模型;可能是自己维护的小模型,也可能是调用第三方的大模型服务。‍‍‍‍‍‍‍‍‍‍‍

大模型+小模型的配置方式细分来说还有很多适用场景,比如上面说的主业务模型+边缘业务模型;再比如,一个功能强大的视频生成模型+多个不同风格的垂下小模型,通过大+小的方式来解决不同场景的问题,以及节约企业成本。‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍

不论是学习还是实际的企业应用,千万要明白没有人能做解决所有的问题,也没有人能完成所有的任务,因此合作才是最好的选择,而大模型+垂直小模型的方式就是最好的合作体现——合作共赢。‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍

个人或企业只需要关注于自身的核心业务,而不用把时间和精力浪费在一些自己根本无力完成的任务上,这就是要做回报率最高,最有性价比的事情。‍‍‍‍‍‍‍

很多人都喜欢做一条龙,集研发,生产,销售为一体,但对大部分中小企业来说成为产业链条上的一环或许是更好的选择。‍‍‍‍‍‍‍‍

而在今年上半年,360CEO周鸿祎也不止一次的提过,不要过分追求大模型的能力和性能,使用多个功能强大的垂直小模型可能会比一个大模型做的更好,更强。‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍

前面可以说是使用大模型+多个小模型的好处,那么使用这种方案有没有什么坏处呢?‍‍‍‍

凡事都有两面性,使用大模型+小模型虽然能带来很多好处但同样也面临着很多问题。‍‍‍‍‍‍

虽然很多时候由于业务的多元性导致我们不得不使用多个模型,但使用多个模型最大的问题就是要适配不同的模型,每个模型都有其不同的输入和输出,而且不同模型的能力不一而足。‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍

我们要在兼容不同模型的基础之上,还要同时兼顾多种模型的复杂性和稳定性。‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍

就类似于传统业务系统架构中,由于业务需要或其它原因导致我们不得不引入一些中间件,但有过项目经验的人应该都知道,每引入一个中间件都会给项目带来一些不确定的潜在风险。‍‍‍‍‍‍‍‍‍

万一中间件不稳定怎么办,万一中间件宕机了怎么办等等,怎么做容错处理等。‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍

总之,没有一成不变的架构,也没有完美无缺的系统,我们需要根据实际情况根本不同的业务场景,选择合适的解决方案,而不是想着靠一个架构解决所有问题。‍‍‍‍‍‍‍‍‍‍

最后,最最最重要的事就是,面对问题一定要灵活多变,切记不可钻牛角尖。‍‍

读者福利:如果大家对大模型感兴趣,这套大模型学习资料一定对你有用

对于0基础小白入门:

如果你是零基础小白,想快速入门大模型是可以考虑的。

一方面是学习时间相对较短,学习内容更全面更集中。
二方面是可以根据这些资料规划好学习计划和方向。

包括:大模型学习线路汇总、学习阶段,大模型实战案例,大模型学习视频,人工智能、机器学习、大模型书籍PDF。带你从零基础系统性的学好大模型!

😝有需要的小伙伴,可以保存图片到wx扫描二v码免费领取【保证100%免费】🆓

👉AI大模型学习路线汇总👈

大模型学习路线图,整体分为7个大的阶段:(全套教程文末领取哈)

第一阶段: 从大模型系统设计入手,讲解大模型的主要方法;

第二阶段: 在通过大模型提示词工程从Prompts角度入手更好发挥模型的作用;

第三阶段: 大模型平台应用开发借助阿里云PAI平台构建电商领域虚拟试衣系统;

第四阶段: 大模型知识库应用开发以LangChain框架为例,构建物流行业咨询智能问答系统;

第五阶段: 大模型微调开发借助以大健康、新零售、新媒体领域构建适合当前领域大模型;

第六阶段: 以SD多模态大模型为主,搭建了文生图小程序案例;

第七阶段: 以大模型平台应用与开发为主,通过星火大模型,文心大模型等成熟大模型构建大模型行业应用。

👉大模型实战案例👈

光学理论是没用的,要学会跟着一起做,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。

在这里插入图片描述

👉大模型视频和PDF合集👈

观看零基础学习书籍和视频,看书籍和视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。
在这里插入图片描述
在这里插入图片描述

👉学会后的收获:👈

• 基于大模型全栈工程实现(前端、后端、产品经理、设计、数据分析等),通过这门课可获得不同能力;

• 能够利用大模型解决相关实际项目需求: 大数据时代,越来越多的企业和机构需要处理海量数据,利用大模型技术可以更好地处理这些数据,提高数据分析和决策的准确性。因此,掌握大模型应用开发技能,可以让程序员更好地应对实际项目需求;

• 基于大模型和企业数据AI应用开发,实现大模型理论、掌握GPU算力、硬件、LangChain开发框架和项目实战技能, 学会Fine-tuning垂直训练大模型(数据准备、数据蒸馏、大模型部署)一站式掌握;

• 能够完成时下热门大模型垂直领域模型训练能力,提高程序员的编码能力: 大模型应用开发需要掌握机器学习算法、深度学习框架等技术,这些技术的掌握可以提高程序员的编码能力和分析能力,让程序员更加熟练地编写高质量的代码。

👉获取方式:

😝有需要的小伙伴,可以保存图片到wx扫描二v码免费领取【保证100%免费】🆓

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

程序员二飞

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值