
人工智能
文章平均质量分 86
架构师研究会
有20多年IT工作经历,目前在一家500强做企业架构。因为工作需要,另外也因为兴趣涉猎比较广,为了自己学习建立了三个博客,分别是【全球IT瞭望】,【架构师研究会】和【开发者开聊】,有更多的内容分享。
展开
-
【langchain】在单个文档知识源的上下文中使用langchain对GPT4All运行查询
做一个简单介绍,酒研年近48 ,有20多年IT工作经历,目前在一家500强做企业架构.因为工作需要,另外也因为兴趣涉猎比较广,为了自己学习建立了三个博客,分别是【全球IT瞭望】,【架构师研究会】和【开发者开聊企业架构师需要比较广泛的知识面,了解一个企业的整体的业务,应用,技术,数据,治理和合规。之前4年主要负责企业整体的技术规划,标准的建立和项目治理。最近一年主要负责数据,涉及到数据平台,数据战略,数据分析,数据建模,数据治理,还涉及到数据主权,隐私保护和数据经济。原创 2024-01-06 21:14:15 · 1144 阅读 · 2 评论 -
【ChatGPT】提示设计的艺术:使用清晰的语法
无论何时构建用于控制模型的提示,重要的是不仅要考虑提示的内容,还要考虑语法。清晰的语法可以更容易地解析输出,帮助LLM生成符合您意图的输出,并允许您编写复杂的多步骤程序。虽然即使是一个微不足道的例子(列出常见的操作系统命令)也能从清晰的语法中受益,但大多数任务都要复杂得多,而且受益更多。我们希望这篇文章能给你一些关于如何使用清晰语法来改进提示的想法。此外,请务必查看指南。您当然不需要它来编写语法清晰的提示,但它可以让您更容易地编写提示。原创 2024-01-06 21:03:39 · 1364 阅读 · 0 评论 -
在Jupyter笔记本中使用Python语言链在Mac上运行GPT4All
做一个简单介绍,酒研年近48 ,有20多年IT工作经历,目前在一家500强做企业架构.因为工作需要,另外也因为兴趣涉猎比较广,为了自己学习建立了三个博客,分别是【全球IT瞭望】,【架构师研究会】和【开发者开聊企业架构师需要比较广泛的知识面,了解一个企业的整体的业务,应用,技术,数据,治理和合规。之前4年主要负责企业整体的技术规划,标准的建立和项目治理。最近一年主要负责数据,涉及到数据平台,数据战略,数据分析,数据建模,数据治理,还涉及到数据主权,隐私保护和数据经济。原创 2024-01-05 20:16:34 · 1137 阅读 · 0 评论 -
【MLOps】使用Ray缩放AI
Ray是一个开源的统一计算框架,可以轻松扩展人工智能和Python的工作负载,从强化学习到深度学习,再到模型调整和服务。下面是Ray的最新架构。它主要有三个组件:Ray Core、Ray AI Runtime和Storage and Tracking。Ray MeetupRay Core为构建和扩展分布式应用程序提供了少量核心原语(即任务、参与者、对象)。Ray AI Runtime(AIR)是一个可扩展的统一ML应用工具包。原创 2024-01-05 20:07:44 · 987 阅读 · 0 评论 -
【生成人工智能】Ray如何解决生成人工智能基础设施的常见生产挑战
做一个简单介绍,酒研年近48 ,有20多年IT工作经历,目前在一家500强做企业架构.因为工作需要,另外也因为兴趣涉猎比较广,为了自己学习建立了三个博客,分别是【全球IT瞭望】,【架构师研究会】和【开发者开聊企业架构师需要比较广泛的知识面,了解一个企业的整体的业务,应用,技术,数据,治理和合规。之前4年主要负责企业整体的技术规划,标准的建立和项目治理。最近一年主要负责数据,涉及到数据平台,数据战略,数据分析,数据建模,数据治理,还涉及到数据主权,隐私保护和数据经济。原创 2024-01-04 20:14:49 · 1174 阅读 · 0 评论 -
【LLM】大型语言模型:2023年完整指南
ArXiv大型语言模型(LLM)是在自然语言处理(NLP)和自然语言生成(NLG)任务中利用深度学习的基础模型。为了帮助他们学习语言的复杂性和联系,大型语言模型是根据大量数据进行预训练的。微调(Fine-tuning)情境学习 (In-context learning)零次/一次/几次射击学习 (Zero-/one-/这些模型可以适用于下游(特定)任务(见图2)。LLM本质上是一种基于Transformer的神经网络,谷歌工程师在2017年的一篇题为《注意力是你所需要的一切》的文章中介绍了它。原创 2024-01-02 21:52:23 · 1596 阅读 · 0 评论 -
【LLM】2023年大型语言模型训练
大型语言模型是一种机器学习模型,它在大型文本数据语料库上进行训练,以生成各种自然语言处理(NLP)任务的输出,如文本生成、问答和机器翻译大型语言模型通常基于深度学习神经网络,如Transformer架构,并在大量文本数据上进行训练,通常涉及数十亿个单词。较大的模型,如谷歌的BERT模型,使用来自各种数据源的大型数据集进行训练,这使它们能够为许多任务生成输出。如果您是大型语言模型的新手,请查看我们的“大型语言模型:2023年完整指南”文章。做一个简单介绍,酒研。原创 2024-01-02 21:47:56 · 1210 阅读 · 0 评论 -
【LLM】人工智能应用构建的十大预训练NLP语言模型
语言模型在NLP应用程序的开发中起着至关重要的作用。然而,从头开始构建复杂的NLP语言模型是非常耗时的。出于这个原因,人工智能和机器学习的研究人员和开发人员对预先训练的语言模型深信不疑。迁移学习是一种用于训练模型的技术,该模型使用在另一个数据集上训练的数据集来执行任务。然后使用一个新的数据集来重新调整模型的用途,以执行不同的NLP功能。经过预训练的模型:为什么它们有用?然后,我们可以使用预训练的模型来解决我们自己的NLP问题,而不是从头开始构建模型。原创 2024-01-01 09:23:04 · 1593 阅读 · 0 评论 -
【LLM 】7个基本的NLP模型,为ML应用程序赋能
做一个简单介绍,酒研年近48 ,有20多年IT工作经历,目前在一家500强做企业架构.因为工作需要,另外也因为兴趣涉猎比较广,为了自己学习建立了三个博客,分别是【全球IT瞭望】,【架构师研究会】和【开发者开聊企业架构师需要比较广泛的知识面,了解一个企业的整体的业务,应用,技术,数据,治理和合规。之前4年主要负责企业整体的技术规划,标准的建立和项目治理。最近一年主要负责数据,涉及到数据平台,数据战略,数据分析,数据建模,数据治理,还涉及到数据主权,隐私保护和数据经济。原创 2024-01-01 09:16:05 · 1295 阅读 · 0 评论 -
【LLM】微调我的第一个WizardLM LoRA
做一个简单介绍,酒研年近48 ,有20多年IT工作经历,目前在一家500强做企业架构.因为工作需要,另外也因为兴趣涉猎比较广,为了自己学习建立了三个博客,分别是【全球IT瞭望】,【架构师研究会】和【开发者开聊企业架构师需要比较广泛的知识面,了解一个企业的整体的业务,应用,技术,数据,治理和合规。之前4年主要负责企业整体的技术规划,标准的建立和项目治理。最近一年主要负责数据,涉及到数据平台,数据战略,数据分析,数据建模,数据治理,还涉及到数据主权,隐私保护和数据经济。原创 2023-12-31 18:37:11 · 1220 阅读 · 0 评论 -
【人工智能新闻】2023年人工智能热门新闻
做一个简单介绍,酒研年近48 ,有20多年IT工作经历,目前在一家500强做企业架构.因为工作需要,另外也因为兴趣涉猎比较广,为了自己学习建立了三个博客,分别是【全球IT瞭望】,【架构师研究会】和【开发者开聊企业架构师需要比较广泛的知识面,了解一个企业的整体的业务,应用,技术,数据,治理和合规。之前4年主要负责企业整体的技术规划,标准的建立和项目治理。最近一年主要负责数据,涉及到数据平台,数据战略,数据分析,数据建模,数据治理,还涉及到数据主权,隐私保护和数据经济。原创 2023-12-30 13:49:05 · 1058 阅读 · 0 评论 -
【LangChain】与文档聊天:将OpenAI与LangChain集成的终极指南
LangChain是一个强大的框架,旨在简化大型语言模型(LLM)应用程序的开发。通过为各种LLM、提示管理、链接、数据增强生成、代理编排、内存和评估提供单一通用接口,LangChain使开发人员能够将LLM与真实世界的数据和工作流无缝集成。该框架允许LLM通过合并外部数据源和编排与不同组件的交互序列,更有效地解决现实世界中的问题。我们将在下面的示例应用程序中使用该框架从文本文档源生成嵌入,并将这些内容持久化到Chroma矢量数据库中。原创 2023-12-29 20:48:14 · 2065 阅读 · 0 评论 -
【最新报道】初窥Windows AI 工作室
做一个简单介绍,酒研年近48 ,有20多年IT工作经历,目前在一家500强做企业架构.因为工作需要,另外也因为兴趣涉猎比较广,为了自己学习建立了三个博客,分别是【全球IT瞭望】,【架构师研究会】和【开发者开聊企业架构师需要比较广泛的知识面,了解一个企业的整体的业务,应用,技术,数据,治理和合规。之前4年主要负责企业整体的技术规划,标准的建立和项目治理。最近一年主要负责数据,涉及到数据平台,数据战略,数据分析,数据建模,数据治理,还涉及到数据主权,隐私保护和数据经济。原创 2023-12-28 20:04:21 · 1084 阅读 · 0 评论 -
「年终总结」生成人工智能的奇妙年份
做一个简单介绍,酒架年近48 ,有20多年IT工作经历,目前在一家500强做企业架构.因为工作需要,另外也因为兴趣涉猎比较广,为了自己学习建立了三个博客,分别是【全球IT瞭望】,【架构师研究会】和【开发者开聊企业架构师需要比较广泛的知识面,了解一个企业的整体的业务,应用,技术,数据,治理和合规。之前4年主要负责企业整体的技术规划,标准的建立和项目治理。最近一年主要负责数据,涉及到数据平台,数据战略,数据分析,数据建模,数据治理,还涉及到数据主权,隐私保护和数据经济。原创 2023-12-28 19:43:37 · 1048 阅读 · 0 评论 -
【自然语言处理】扩展命名实体识别器(NER)以使用spaCy标记新实体
标记单词的顺序-简洁明了。这篇文章假设读者对从文本中提取实体有一些概念,并希望进一步了解新的自定义实体识别的最先进技术以及如何使用这些技术。然而,如果你是NER问题的新手,请在这里阅读。话虽如此,这篇文章的目的是描述spaCy的预训练自然语言处理(NLP)核心模型用于学习识别新实体的使用。来自spacy的现有核心NLP模型被训练来识别各种实体,如图2所示。尽管如此,用户可能希望构建自己的实体来解决问题需求。在这种情况下,预先存在的实体会使自己变得不足,因此,需要训练NLP模型来完成这项工作。原创 2023-12-26 20:09:09 · 1611 阅读 · 0 评论 -
【开源软件】最好的开源软件-2023-第25名 nbdev
nbdev是fast.ai的一个支持Git的Jupyter笔记本驱动的开发平台,它为数据科学家提供了所需的探索自由,但也能够在同一个笔记本内轻松创建带有文档的模块原创 2023-12-13 20:30:31 · 486 阅读 · 0 评论 -
【开源软件】最好的开源软件-2023-第26名 Accelerate
如果只需添加四行代码,就可以将大规模的分布式训练和推理添加到任何PyTorch代码中,会怎么样?Huggingface的Accelerate开箱即用,允许您通过简单的配置开关使用TPU设备或微软的DeepSpeed优化等功能。是的,您可以使用分布式训练、分片并行和梯度积累等技术,在十亿参数规模上训练深度学习模型,所有这些都由Accelerate库在幕后处理。确保大模特的培训不仅限于行业中的重量级人物,这对多样性和实验性很重要,因此看到Accelerate成为PyTorch生态系统的一部分令人振奋。原创 2023-12-12 21:55:02 · 411 阅读 · 0 评论 -
【开源软件】最好的开源软件-2023-第27名 Stable Diffusion
虽然这样的模型肯定会引发人们对数据集管理和创建NSFW图像的能力的担忧,但几乎可以肯定的是,这项技术最好掌握在每个人手中,而不仅仅是少数几家大公司手中,无论是为了推进研究,还是为了在未来几年创作艺术作品。Stable Diffusion是一个文本到图像的人工智能模型,可以生成质量惊人的图像。该项目成立仅两个月,就如野火般蔓延,世界各地的爱好者已经在对原作进行改进,以加快生成速度,在内存较低的GPU上运行,并增加内画和外画支持。原创 2023-12-12 21:36:50 · 489 阅读 · 0 评论 -
【开源软件】最好的开源软件-2023-第28名 EleutherAI
GPT-NeoX-20B是一个新的200亿参数的自然语言处理模型,由早期GPT-J的发行商EleutherAI创建,这是一个60亿参数的模型。与OpenAI的GPT-3相比,这些模型可能看起来很小,GPT-3有1750亿个参数,但它们使用LAMBADA、Winogrande、Hellaswag和其他数据集取得了强大的基准测试结果。你可以测试GPT-J的句子完成,并执行更高级的NLP任务,如翻译和分类。”目标是让尽可能多的研究人员能够使用这项技术,这样我们就可以学会如何控制它。原创 2023-12-12 21:33:14 · 482 阅读 · 0 评论 -
【LangChain开发】LangChain是基于LLM的应用程序的过去,这是未来
EmbeddChain,这是一个使用LLM构建聊天机器人的框架,可以与各种类型的数据交互,如YouTube视频、PDF、网页、docx文件、文档和Notion笔记原创 2023-12-10 10:33:59 · 888 阅读 · 0 评论 -
【ChatGTP】将GPT当作团队成员
分享了我们为将这些ChatGPT新员工转变为一系列专家而建立的系统,以及我们如何在团队中利用它来提高我们的人工智能能力。原创 2023-12-02 12:22:13 · 945 阅读 · 0 评论 -
【风险管理】认知风险管理
NLP技术的商业应用介绍机器学习 (ML) 应用程序已经无处不在。每天都有关于自动驾驶汽车人工智能、在线客户支持、虚拟个人助理等的新闻。然而,如何将现有的商业实践与所有这些惊人的创新联系起来可能并不明显。一个经常被忽视的领域是应用自然语言处理 (NLP) 和深度学习来帮助快速有效地处理大量业务文档,从而在大海捞针。允许机器学习有机应用的领域之一是金融机构和保险公司的风险管理。组织在如何应用机器学习...原创 2023-07-08 22:03:34 · 275 阅读 · 0 评论 -
【LLM】LangChain 资料大全
【LLM】LLMs 和 SQL 【LLM】LangChain 代理和大型语言模型 【LLM】LangChain TypeScript支持 【LLM】LangChain 利用上下文压缩改进文档检索 【LLM】LangChain 支持 Supabase 【LLM】LangChain 的Callbacks 改进 【LLM】LangChain 自治代理和代理模拟 【LLM】LangChain+Zapier自然语言动作(NLA) 【LLM】LangChain入门:构建LLM驱动的应用原创 2023-05-13 10:37:17 · 1125 阅读 · 0 评论 -
「技术选型」深度学习软件如何选择?
深度学习(DL, Deep Learning)是机器学习(ML, Machine Learning)领域中一个新的研究方向,它被引入机器学习使其更接近于最初的目标——人工智能(AI, Artificial Intelligence)。深度学习是学习样本数据的内在规律和表示层次,这些学习过程中获得的信息对诸如文字,图像和声音等数据的解释有很大的帮助。它的最终目标是让机器能够像人一样具有分析学习能力...原创 2023-02-18 21:29:53 · 1020 阅读 · 0 评论 -
【MLOps】充分利用 MLOps
希望从人工智能中获得全部商业利益的企业正在转向 MLOps——一组旨在实现人工智能的新兴最佳实践和工具。当公司第一次开始部署人工智能和构建机器学习项目时,重点往往是理论。有没有可以提供必要结果的模型?如何建造?怎么训练?但是数据科学家用来创建这些概念证明的工具通常不能很好地转化为生产系统。因此,根据 IDC 的数据,部署 AI 或 ML 解决方案平均需要 9 个多月的时间。IDC 分析师 Srir...原创 2022-11-07 19:58:16 · 624 阅读 · 0 评论 -
【数据隐私】数据隐私执法行动加强
监管机构最近几天忙于对 Twitter、Meta (Facebook) 和 Clearview AI 等一些最知名的科技公司对违反数据隐私的行为采取执法行动和罚款。虽然数据分析和包括机器学习在内的人工智能等高级分析可以改变业务结果的游戏规则,但作为客户数据的管家也有很多责任。贵组织的数据治理负责人是否有效地跟踪最近有关数据隐私的执法行动?有哪些教训值得学习?一些备受瞩目的执法行动、和解和其他事件再...原创 2022-11-06 20:24:44 · 208 阅读 · 0 评论 -
【人工智能】要将 AI 集成到您的业务中,请像 NASA 工程师一样思考
越来越清楚的是,利用先进技术的能力对于在未来几年取得行业领先的成功至关重要。这就是太空管理局的做法——你也可以。超过一半 (52%) 的美国公司在 2021 年加速采用人工智能,那些将人工智能融入每项业务运营结构的公司将在未来十年取得最大成功。然而,对于许多公司来说,考虑人工智能集成的简单行为可能会让人不知所措。从高昂的感知成本到员工缺乏技术人才,添加先进工具的挑战比比皆是,尤其是对于中小型公司而...原创 2022-11-04 21:02:34 · 254 阅读 · 0 评论 -
【人工智能伦理】缩短人工智能伦理和治理的 6 大商业风险
如果道德和治理没有纳入您的 AI 战略,人工智能及其实施所固有的因素可能会对您的公司产生可怕的影响。根据你观看的终结者电影,邪恶的人工智能天网要么已经接管了人类,要么即将接管人类。但不只是科幻作家担心不受控制的人工智能的危险。在 AI 研究和咨询公司 Emerj 2019 年的一项调查中,14% 的 AI 研究人员表示 AI 是对人类的“生存威胁”。即使人工智能世界末日没有到来,改变人工智能道德规...原创 2022-10-13 21:34:47 · 384 阅读 · 0 评论 -
【人工智能】2022年人工智能驱动企业的预测
在过去的一年里,企业采取了激烈的措施,采用更好的技术和创新来支持新的业务重点和工作流程。此类技术包括对网络、安全性和自动化的重大升级,所有这些都与支持不断增长的混合工作环境相关。Google 与 Economist Impact 的调查显示,亚太地区 53% 的员工认为员工的生产力将是混合工作模式的显着优势,而这只是冰山一角——随着我们继续收获并见证它可以给雇主和雇员带来的好处。然而,为了支持无缝...原创 2022-09-19 21:22:34 · 137 阅读 · 0 评论 -
【聊天机器人】您必须了解的最佳聊天机器人框架
在本博客中,我们将讨论 7 大聊天机器人开发框架。聊天机器人现在已成为许多企业不可或缺的一部分。他们利用聊天机器人提供客户支持服务。聊天机器人增强了人工代理以提供客户服务支持。企业每天都会收到大量查询。手动回答这些问题不仅耗时,而且还会增加公司的成本,因为他们必须雇用更多的人来提供客户支持服务。如今,缺乏及时响应通常会导致客户感到沮丧。这最终可能导致企业失去客户。这就是为...原创 2022-05-12 22:09:27 · 2388 阅读 · 0 评论 -
【人工智能】技术采纳:重新思考医疗保健的罗杰钟形曲线
“人们对创新传播如此感兴趣的一个原因是,即使一个新的想法有明显的优势,也往往很难被采纳,”埃弗雷特·罗杰斯(Everett Rogers)在介绍他1983年出版的开创性著作《创新传播》(Diffusions of Innovation)第3版时说,他表面上是这一主题的先驱,1983). 正如罗杰斯博士所指出的,这个想法并不是他独创的;几个世纪以来,它一直是人类生存条件的一...原创 2022-01-17 21:56:41 · 636 阅读 · 0 评论