大模型如何重塑企业知识管理?

知识管理是企业持续发展和创新的核心动力之一,长期以来却面临着效率低下的挑战。大模型时代的到来,为企业知识管理带来了新的机遇,如何通过大模型重塑企业知识管理全流程进而提升效率?如何拓宽知识的边界,挖掘知识的内在价值?大模型重构的知识管理又能为企业带来哪些价值?带着这些问题,在《对话AI原生:云智实验室》栏目中,南网科研院知识管理专家林正平、百度智能云知识管理产品线总经理宋勋超与InfoQ编辑展开了一次深度探讨。

InfoQ:企业知识管理是什么?对于企业来说有何价值?

宋勋超: 知识管理自上世纪60年代在国外逐渐兴起,1998年以后,国内的企业开始探索知识管理的应用。

知识管理发展主要分为三个阶段:

第一个阶段是基础数字化的阶段。 在这个阶段的知识管理平台,更多的是将企业散落的各种数据进行归总和汇集,但没有对知识去进行深度的利用,初期的知识管理主要是文档系统。

第二个阶段是知识的信息化阶段。 在这个阶段,企业将收集的个人知识和系统知识进行粗粒度的加工和整理,进而形成了知识门户或者是企业搜索。

第三个阶段是大模型时代的知识管理,在大模型的加持下,知识管理的全流程效率都有了显著的提升。大模型强大的理解能力,使得知识管理平台以往很难去解决的知识加工和应用问题都迎刃而解。

在第三阶段,知识管理可以更加深入到业务,使得知识管理在企业内更加具象化为一个可以永远传承知识的老师傅,为企业员工提供持续的知识供给,带给企业的价值可以更好地去被衡量。

InfoQ:甄知与传统知识管理平台有何区别?

宋勋超:甄知是国内首个大模型全面重构的一站式知识管理平台,可以全面重塑知识管理流程。

其实知识管理领域一直有四个问题是非常难解决的,也是制约着知识管理发展的瓶颈:

  • 知识源分散

  • 知识获取难度高

  • 知识更新慢

  • 基于知识的应用薄

有了大模型,实际上知识管理进入了新的阶段。之前的这四个问题如果在小模型时代逐一地去解决,需要耗费非常高的成本,每一个模型都需要去对它进行大量的数据标注和精调。而在现在的大模型时代,我们可以不用任何工程化的手段就能够解决上述问题,成本极低。

另外,我认为大模型能给知识管理带来的最大的变化,其实就是Agent技术。一个智能体它要去执行复杂的任务,其不仅要理解任务本身,更多的是形成知识驱动的解决范式,所以我也认为知识管理是大模型成熟应用的第一站。

InfoQ:南网科研院在知识管理上遇到了哪些难题?

林正平: 南网科研院过去标准知识管理主要还是针对文档级别,过去一线的生产人员只能通过纸质的标准或者在标准平台上通过标准名进行信息检索,怎么样去驱使所有人用统一的标准去完成相关工作,是我们在整个企业运作过程中急迫要去解决的一个问题。这是标准知识管理面临的最大的问题。

InfoQ:甄知如何解决南网科研院在知识管理上的难题?

宋勋超: 甄知和南网科研院已经合作了数个年头了,我们最初要解决的问题就是知识的显性化问题,很多企业也会有类似的需求——企业里有很多经验,这些经验都存在于老专家的脑子里,你们能不能给我提供一个平台或系统,从而把老专家脑子里的知识“萃取”出来?

这个愿景对应的需求就是“能够将各种规则,各种隐性的数据引入知识管理系统”。针对这样的原始的需求,甄知知识管理平台提供了多种形式的数据接入方式。比如API方式的接入,手动的上传以及推拉拽等等一系列的知识同步机制,企业能够将结构化、或者是大量存在的非结构化的数据,甚至是数据类的知识,快速地去接入到系统里。

2024年甄知还有一个比较重要的产品升级:平台对接了非常多的企业级的知识源,比如说confluence、wiki、各类企业网盘,甚至包括飞书、钉钉文档、企业微信文档,这些在企业内广泛存在的企业级的知识源,在甄知的平台上能够去快速地、无缝地去集成和接入,极大程度地提升整个知识接入的效率。

更为重要的是甄知平台提供AI驱动的协同编辑和智能化的写作工具组件,使得企业很多在日常工作里面能够去随写随记的这一部分知识,都能够实现即创作、即沉淀,效率提升极大,且管理成本较低。

InfoQ:甄知怎么帮助企业构建知识体系?

宋勋超: 面向于大模型的应用,我们需要把原始知识、原始数据整理成大模型能够理解的形态。这也是知识管理传统的系统耗费人力最多的地方之一。

甄知的知识管理平台提供三个比较核心的技术能力,第一是多模态解析的能力,第二是知识结构的解析能力,第三是知识要素的加工能力。

多模态解析的能力是指现在越来越多的企业,它广泛的数据存在于非结构化的文档里面,这些非结构化的文档里包含各种复杂的表、图以及大段的文字。以南网科研院为例,几万篇的国标、行标、企标,都是以PDF文档的形式存在。甄知借助大模型的OCR视觉理解能力,能够非常便捷、高效、快速地把企业内存量的多模态文档解析成章、条、目、段落,甚至是图表,这对于后面的知识加工成功与否非常关键。

另外,面向于企业级的搜索和RAG,甄知提供了可配置化的段落切分的能力,可以去配置固定的长度。最为重要的是甄知能够用智能化的手段非常精确的识别语义化单元,从而使我们的RAG和搜索能够达到一个非常精准化的程度。

借助大模型,刚刚所说的这一系列加工过程,都能以非常高效的方式,实现大规模的生产,企业只需要去配备一些必要的知识运营人员,对大模型生产的结果进行审核、校验和入库,相比于传统的方式,至少提升了2-3倍的工作效率。

InfoQ:南网科研院是怎么搭建知识体系的?

林正平: 南网科研院其实非常关注科技创新这个领域。我们有海量的,像论文、标准、专利还有项目成果等等相关的一些知识数据,以往我们的项目数据怎么分到技术体系树里面去是一个非常大的难题。过去我们更多是根据一些规则,就是专家去梳理一些文本规则来对这些资源进行分类。整个效率相对较低,另外它的准确率也不够高,需要大量的人工去审核。

现在有了大模型,还有相关的智能化技术加成后,在知识分类上我们会根据业务需求组建知识体系框架,通过模型来自动打标签,实现海量知识的快速分类,便于对这些知识进行分析还有查找,目前我们的效率提升还是比较明显。

另外就是在知识关联关系的挖掘上,以往我们的知识都是单兵作战,像我们有一个论文,我只能看到这个论文它自身的一些内容,在知识关联上很少能够挖掘。像标准也是,标准之间它有引用关系,以往我只能看到某一个标准,但是我不知道这个标准跟它相关的一些作业指导书有哪些,跟它相关的技术规范书有哪些?在知识的利用上还不是非常的深入,对于整个知识的关联发现也非常难去完成。有了智能化技术的加成,平台可以更好地去挖掘知识之间的关联关系,最终来构建知识图谱,支撑标准文、论文相关知识的推理以及问答等应用,这些对我们的帮助都是非常的大。

InfoQ:甄知通过大模型重构知识体系的技术突破点是什么?

宋勋超: 对于知识组织而言,我们的知识都来源于各个孤立的业务系统,它本身并不具备体系化和组织化。本质上来讲,知识组织和体系的建立,就是非常复杂的一个多维分类体系的建立。

传统的知识管理时代基本上都是靠人,基于大模型非常强大的语义理解能力,我们能够通过简单的prompt,可以做到Zero-shot和Few-shot这样的分类,可以让运营人员很少参与到这个过程,就能够去实现复杂分类体系的建设。

过去知识图谱的技术,它从关系的挖掘、消歧再到鉴编,这一系列的环节依赖于非常多的小模型。现在有了大模型,实际上在一些应用场景里面已经验证基本上不太需要专业的数据标注,基于大模型本身的理解能力,结合知识图谱平台构建的机制,就能够在初始的准确率达到80%以上。

在大模型加持下,甄知在知识组织与知识关联方面展现出强大能力。目前,我们在应用层面已成功实现了基于知识关联的门户构建,以及个性化推荐等一系列功能,真正做到了“千人千面”。 事实上,这些能力的实现都得益于大模型的引入,它使我们能够以更低的成本,对企业知识进行系统化的组织和管理。

InfoQ:甄知如何提升南网科研院的知识生产效率?

林正平: 在有大模型之前,我们跟百度合作开展标准问答相关的一些研究,以往我们是采用知识图谱的方式,我还记得是在两三年前,我们组织了大量的专家对我们标准的指标体系进行了深入的梳理,总共是梳理了十几级的体系,最终通过知识抽取、消歧融合等等相关的一系列的工作,才构建了我们试点设备的标准知识图谱,最终才能支持标准的知识问答。

那有了大模型之后,现在其实我们需要专家参与的工作量已经大大的减少,目前基本上我们只需要给一些简单的问答,通过大模型去训练,就可以完成问答模型的构建以及问答应用的开发。这对我们知识管理人员来说是一个极大的效率提升,大大的解放了我们的生产力。我们现在构建了标准的问答,还有语义检索相关的服务工具,对标准知识的查阅效率已经提升50%以上。

目前,大模型还能辅助员工去编写标准相关的大纲、正文并可以撰写科研机构的科技报告的综述、背景等等的相关的一些内容,我们的编写效率也是提升了两倍以上,对企业的知识生产运行效率来说提升还是非常明显的。

InfoQ:甄知如何帮助企业用好知识?

宋勋超:知识要能够驱动创新,它必然是要和场景结合的。刚刚我们说知识管理在南方电网就好像一个老专家。但是这个老专家他其实应该是有角色的,面向于企业的高层管理人员,他可能更加关注企业的宏观经营数据,面向于企业的中层管理人员,他可能更需要去了解项目的进度,面向于技术人员,他可能更关心的是技术方案。企业里面的每一个关键角色对于知识的诉求都是不一样的。所以我们认为如果要在一个企业内广泛地实现知识的创新,就必须要将知识发散,也就是要把知识应用到业务系统里面,形成真正的业务和场景化的知识助理。

甄知实际上为企业提供了三方面的能力,以助力其更好地利用知识。

首先是集中化的RAG能力,甄知打造了一个企业级RAG平台,确保企业中的每位员工在知识管理系统中提问时,都能真正获得有价值的答案。

其次,甄知的推荐系统能够通过分析企业内部多元异构的员工画像,实现千人千面的个性化推荐,以及面向业务场景的即时推荐。甄知的知识管理平台已经不仅仅是一个知识门户或知识检索系统,它已经升级为一个企业知识化Agent构建的平台。在这个平台上,我们基于构建的知识体系,能够打造出知识化的差旅助理、报销助理、销售助理,甚至HR助理等一系列由知识驱动的Agent助理。我认为,只有当搜索、推荐和Agent服务这三个层面在同一个平台上实现出色的平台化整合时,我们企业内部的应用场景才会变得非常多元化,企业的创新源泉才会源源不断。

最后,甄知覆盖了企业的知识生产、加工及应用全流程,最终能够将企业员工、知识应用与知识生产形成一个闭环与反馈机制。因此,在使用过程中,我们不断收集企业对于知识管理产品应用效果的反馈,这使我们能够不断提升知识生产与加工的效率。

InfoQ:南网科研院如何用好知识,赋能每一位员工?

林正平: 南网科研院一直在推进从人找知识升级为知识找人。南方电网整个企业岗位非常多,对效率的要求以及安全的要求也非常的高,我们开展知识管理的理念主要是从用户、场景和知识三维一体的角度来进行开展,比如说我们的科研人员关注怎样快速去获取相关领域的高质量的报告、核心的论文、最新的研究成果以及历史相关的项目经验等信息。而我们的一线生产人员则关更加关注缺陷处理的方法以及作业的规范,每个岗位对于知识的需求都有存在一定的差异。

以往,我们主要通过检索的方式来获取知识。然而,在人工智能时代,我们更需要从用户的画像和使用场景出发,为用户推荐有针对性、高质量的知识,以提升知识的获取效率。通过知识管理,我们希望总结并沉淀最佳实践,同时做好经验的传承。我们的知识管理平台的使命就是支撑知识的汇聚、存储和利用,甚至将知识直接嵌入到业务场景中去,无需人工干预,从而更好地支撑企业的创新和高质量发展。

那么,如何系统的去学习大模型LLM?

我在一线互联网企业工作十余年里,指导过不少同行后辈。帮助很多人得到了学习和成长。

作为一名热心肠的互联网老兵,我意识到有很多经验和知识值得分享给大家,也可以通过我们的能力和经验解答大家在人工智能学习中的很多困惑,所以在工作繁忙的情况下还是坚持各种整理和分享。

但苦于知识传播途径有限,很多互联网行业朋友无法获得正确的资料得到学习提升,故此将并将重要的AI大模型资料包括AI大模型入门学习思维导图、精品AI大模型学习书籍手册、视频教程、实战学习等录播视频免费分享出来。

所有资料 ⚡️ ,朋友们如果有需要全套 《LLM大模型入门+进阶学习资源包》,扫码获取~

篇幅有限,部分资料如下:

👉LLM大模型学习指南+路线汇总👈

💥大模型入门要点,扫盲必看!
在这里插入图片描述
💥既然要系统的学习大模型,那么学习路线是必不可少的,这份路线能帮助你快速梳理知识,形成自己的体系。
在这里插入图片描述

👉大模型入门实战训练👈

💥光学理论是没用的,要学会跟着一起做,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。
在这里插入图片描述

👉国内企业大模型落地应用案例👈

💥《中国大模型落地应用案例集》 收录了52个优秀的大模型落地应用案例,这些案例覆盖了金融、医疗、教育、交通、制造等众多领域,无论是对于大模型技术的研究者,还是对于希望了解大模型技术在实际业务中如何应用的业内人士,都具有很高的参考价值。 (文末领取)
在这里插入图片描述
💥《2024大模型行业应用十大典范案例集》 汇集了文化、医药、IT、钢铁、航空、企业服务等行业在大模型应用领域的典范案例。

在这里插入图片描述

👉LLM大模型学习视频👈

💥观看零基础学习书籍和视频,看书籍和视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。 (文末领取)
在这里插入图片描述

👉640份大模型行业报告👈

💥包含640份报告的合集,涵盖了AI大模型的理论研究、技术实现、行业应用等多个方面。无论您是科研人员、工程师,还是对AI大模型感兴趣的爱好者,这套报告合集都将为您提供宝贵的信息和启示。
在这里插入图片描述

👉获取方式:

这份完整版的大模型 LLM 学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费

😝有需要的小伙伴,可以Vx扫描下方二维码免费领取🆓

本文转自 https://blog.csdn.net/youmaob/article/details/140519359?spm=1001.2014.3001.5501,如有侵权,请联系删除。

  • 25
    点赞
  • 9
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值