2023年初,ChatGPT 的出现,引发了国内外各类AIGC技术应用的爆发,让人们看到了新世界的曙光,也感受到了迫在眉睫的剧变。无论是前沿科技产业还是整个经济社会格局,都将因此产生巨大的变化,众多企业将迎来价值重估,无数行业将面临重做。
作为15年来陪伴数以十万计创业者共同成长的产业加速平台,创业黑马发起了AIGC主题系列直播活动,邀请多位业内知名企业家、投资人、专家学者和创业实践者, 从软硬件平台视角、投资人视角、行业应用视角等维度看AIGC,共话大模型时代新机会,展现产业新力量。
本期的分享嘉宾是达观数据首席战略官CSO刘江贤。 达观数据积极研发国产版GPT“曹植”大语言模型LLM系统,作为垂直、专用、自主可控的国产版ChatGPT模型,该系统结合先进的自然语言处理(NLP)、智能文档处理(IDP)、光学字符识别(OCR)、机器人流程自动化(RPA)、知识图谱等技术,为大型企业和政府机构提供文档智能审阅、文档智能写作、知识搜索与问答、办公流程自动化等智能文本机器人产品。荣膺中国人工智能领域最高奖“吴文俊人工智能奖”、工信部第三批国家级专精特新“小巨人”企业、中国人工智能科技创新Top50等众多资质。
在5月18日的《黑马说》直播中,嘉宾围绕《ChatGPT大语言模型的创新与应用》主题进行了深度论述,就ChatGPT的特点、技术升级及AI国产自动化等问题进行探讨。
以下为本次直播实录整理:
我在五四青年节刚刚加盟达观数据,担任达观数据首席战略官,也曾在中央电视台做过主持人是金话筒的获得者。2011年在上海交通大学EMBA就读之后,现在担任上海交通大学安泰EMBA校友会的副会长兼执行秘书长。
达观数据是智能文本处理的科创企业,它在这方面发展势头很猛,在智能文本处理服务商当中国内排名第一,获得了中国信通院智能文档处理的产品权威认证。2021年,达观数据获得国家级专精特新“小巨人”称号,在软件成熟度的最高等级的认证当中,达观数据也是榜上有名。
这和ChatGPT有什么关系?前两天碰到我的一个同学,是做hr的,他刚回绝了一家要做语言大模型的企业,其曾在全球500强企业就职,他认为ChatGPT创业不是拍脑门召集几个有类似经历的人就能干得了的,关键在于场景和业务。
它需要大规模的算力投入,这个是有一定难度的。而达观在这个领域已经创业8年,做到行业首位,市占率在文本智能处理领域占到第一,实现了全行业自动化文本处理应用场景,服务网络遍布全国,在全国已经建了4个子公司,达观已经积累了非常多的成熟应用场景。
ChatGPT所以在此基础上创办自己的“曹植”大模型。达观产品的技术目前已应用于众多行业,也有很多服务合作伙伴。
回到智能文本与ChatGPT的关系,以及GDP探索大模型的应用和创新。
人类文明的记载是从有文字开始的,最早出现在国内的汉字是在甲骨文上,甲骨文上的字是谁造的?是黄帝时期造字的左史官仓颉。
我们原来的字刻在哪?刻在石头上,有岩画,有石片,逐渐演变成今天的文字。甲骨文一开始是做占卜的,世界上文字的起源据考古记载,从楔形文字、圣书文、玛雅文,而留存在世上的文字,唯一一脉相传至今的就是甲骨文。
文字出现之后,人类文明演进的速度突然涌现出来。文字的出现是人类文明的起点,有了文字,才有本草纲目、天工开物、九章算术等等科学知识。
达观数据的“达观”两个字,可以在甲骨文中找到。甲骨文“达”字很像一个人站在山上,“观”是两个眼睛向外看,“达观”意在站得高看得远。 公司的文化也是务实求真、通达乐观,站在高处回望历史,穿透未来。
如今我们所有工作都围绕文字展开,比如说写材料、翻译内容、撰写方案,如果用自动化来处理文字,不就省时省力了吗?
讲到自然语言处理NLP,为什么文字的自动化处理这么难?我们日常用的汉字大概有3500个,但中文解析非常复杂。因为汉字包含基础常识,阅读起来很多不是明面意思所能表达的。需要更多技术的积累,才能突破文字处理的技术。 有一些专业的知识,比如狗眼看人低、狐朋狗友,仅仅之时诠释“狗”这个字,要让计算机识别的话,都要经过长期的训练。因此大模型需要大量的语料、知识,要想计算机了解冰山背后的知识,需要跨越认知屏障。
达观总结出ChatGPT的特点是一独三巨。是指**“全球独树一帜的技术路线”、“巨大的参数规模”、“巨大的算力消耗”、“巨大的训练数据量”。**所以 OpenAI在2016年,历经7年,耗资了近20亿美元,经过若干次失败才推出划时代意义的人工智能系统。
如何理解ChatGPT,先从GPT三个字母来理解。“G”是Generative,就是出发点和核心能力,即自己生成、自己创造;“P”是Pretrained, 通过大量文档预先学习的能力,现在有预训练工程师,比AI训练师提高了一个等级;“T”是Transformer, 是对文字、知识有效的提炼算法。
大模型LLM与ChatGPT的关系是怎样的?GDP是众多LLM大语言模型当中的一种,是目前被证明处理文字最成功的一种模型;ChatGPT是面向对话场景定向优化后的GPT子版本,未来针对其他应用场景还会出现更多的X-GPT系统,甚至更多其他的LLM语言模型。
目前绝大多数大规模语言模型都使用了Transformer的基础组件结构,但是在实现方式和结构组件上有所区别,总体可以划分为三条技术发展路径。技术路线一的优点是训练代价小,效果不错, 曾经一度领先;技术路线二的缺点是算力数据等成本极高, 需要大量的数据,也只有open AI坚持下来,做了一件难而正确的事;技术路线三是混合模式, 理论上融合了前两者,实际效果还待未来发展。
跑出来以后可以用它写情书、写科研报告、写年终总结报告。它有先后的逻辑,能把一篇文章中的标题提炼出来。这就是“涌现”能力,像人类有了文字之后,文明突飞猛进一样。“涌现”能力,是在参数规模超过某个阈值后,可观测到系统处理结果会出现一个巨大的飞跃,也叫机器的顿悟。目前导致该现象的原因尚不明确,有人猜测是很多复杂任务需要多个连接思维的这种贯通才能够达到准确效果。
来看一下智能系统的三要素,即算力、数据、算法。 首先算力方面有很大挑战,GPT出现后,国内算力市场供不应求,现有的算力资源不够分配了,大家都在做自己的大语言模型;另外整个市场需要人才,未来几年之内这三方面的人才紧缺是显而易见的。
我们在AIGC的国产自主化道路是非常强的,但同时道阻且长。目前达观研发的大模型叫做曹植大语言模型,强调、垂直、专用国产GPT模型。为什么取名曹植?因为这个人才高八斗,七步成诗。
达观的曹植大模型的技术路线图强调“垂直”、“专用”、“国产”。“垂直”是针对金融、工业、财税、政务、能源等垂直行业的应用场景;“专用”是系统可以为每个用户量身定制、私有化部署,确保数据安全私密;“国产”是坚持原创自主,训练数据和算法模型自主可控。
曹植大模型更强调垂直领域专业知识的这种积淀,要用大模型不断填充专业领域的知识,要把人类的常识输入进去,要把逻辑推理能力把它训练出来,要让它熟练运用知识。目前达观专注于运用AI技术实现文本自动化的处理,包括图像、文本、语音。
例如起标题,根据文章里多个字词,寻找最佳的概率匹配;还有申报材料的自动生成,还可以帮助完成总结报告。我们有一个产品达观助手,已经镶嵌在WPS office成为自动插件,进行写作、纠错、润色、排版等功能,是免费使用的。
大语言模型开通了人工智能之路,从传统的专用AI系统到通用人工智能AGI系统。 加入进来的大企业越来越多,让AI系统像人类一样灵活应对各种应用场景和多样化的工作环境,实现各行各业的通用智能化。这确实为我们打开了一扇大门。印刷术的出现改变了文字,推动社会经济、推动人类文明方面的巨大改变。未来达观数据也将通过智能文本实现技术的突飞猛进,要进行一场办公室革命。
ChatGPT给我们最大的启示是要学会提问题,必须率先跟上时代的步伐,才能强健,才能抢占商机。
我们判断计算机的文字处理将超过大部分人类,这不是危言耸听。我们希望人类在机器高度智能化发展的时候,找到人类存在的价值。当然了,机器替代人类,这是危言耸听。人类总是机器和技术的主导者和掌握者。我们也会脚踏实地、仰望星空,探索更高的科技来为人类服务。
如何学习大模型 AGI ?
由于新岗位的生产效率,要优于被取代岗位的生产效率,所以实际上整个社会的生产效率是提升的。
但是具体到个人,只能说是:
“最先掌握AI的人,将会比较晚掌握AI的人有竞争优势”。
这句话,放在计算机、互联网、移动互联网的开局时期,都是一样的道理。
我在一线互联网企业工作十余年里,指导过不少同行后辈。帮助很多人得到了学习和成长。
我意识到有很多经验和知识值得分享给大家,也可以通过我们的能力和经验解答大家在人工智能学习中的很多困惑,所以在工作繁忙的情况下还是坚持各种整理和分享。但苦于知识传播途径有限,很多互联网行业朋友无法获得正确的资料得到学习提升,故此将并将重要的AI大模型资料包括AI大模型入门学习思维导图、精品AI大模型学习书籍手册、视频教程、实战学习等录播视频免费分享出来。
-END-
👉AGI大模型学习路线汇总👈
大模型学习路线图,整体分为7个大的阶段:(全套教程文末领取哈)
第一阶段: 从大模型系统设计入手,讲解大模型的主要方法;
第二阶段: 在通过大模型提示词工程从Prompts角度入手更好发挥模型的作用;
第三阶段: 大模型平台应用开发借助阿里云PAI平台构建电商领域虚拟试衣系统;
第四阶段: 大模型知识库应用开发以LangChain框架为例,构建物流行业咨询智能问答系统;
第五阶段: 大模型微调开发借助以大健康、新零售、新媒体领域构建适合当前领域大模型;
第六阶段: 以SD多模态大模型为主,搭建了文生图小程序案例;
第七阶段: 以大模型平台应用与开发为主,通过星火大模型,文心大模型等成熟大模型构建大模型行业应用。
👉AGI大模型实战案例👈
光学理论是没用的,要学会跟着一起做,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。
👉AGI大模型视频和PDF合集👈
观看零基础学习书籍和视频,看书籍和视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。
👉学会后的收获:👈
• 基于大模型全栈工程实现(前端、后端、产品经理、设计、数据分析等),通过这门课可获得不同能力;
• 能够利用大模型解决相关实际项目需求: 大数据时代,越来越多的企业和机构需要处理海量数据,利用大模型技术可以更好地处理这些数据,提高数据分析和决策的准确性。因此,掌握大模型应用开发技能,可以让程序员更好地应对实际项目需求;
• 基于大模型和企业数据AI应用开发,实现大模型理论、掌握GPU算力、硬件、LangChain开发框架和项目实战技能, 学会Fine-tuning垂直训练大模型(数据准备、数据蒸馏、大模型部署)一站式掌握;
• 能够完成时下热门大模型垂直领域模型训练能力,提高程序员的编码能力: 大模型应用开发需要掌握机器学习算法、深度学习框架等技术,这些技术的掌握可以提高程序员的编码能力和分析能力,让程序员更加熟练地编写高质量的代码。
👉获取方式:
😝有需要的小伙伴,可以保存图片到wx扫描二v码免费领取【保证100%免费
】🆓