自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(56)
  • 收藏
  • 关注

原创 AI学习笔记(二)- 当前主流的AI 深度学习框架与运行平台

PyTorch采用已经为许多研究人员、开发人员和数据科学家所熟悉的原始Python命令式编程风格。同时它还支持动态计算图,这一特性使得其对时间序列以及自然语言处理数据相关工作的研究人员和工程师很有吸引力

2024-07-21 09:00:00 573

原创 AI学习笔记(一)-初识AI

人工智能(Artificial lntelligence),英文缩写为AlI。它是计算机科学的一个分支,研究用于模拟、延伸和扩展人的智能的理论或方法、技术及应用系统。它企图了解智能的实质,并生产出一种能与人类智能相似的智能机器,该领域的研究包括机器人、语言识别与处理、图像识别与处理、自然语言处理和专家系统等。

2024-07-20 08:30:00 716

原创 AI大模型,程序员的下一个职业春天

在后疫情时代的经济环境中,各行各业的就业形势变得异常严峻,互联网行业尤甚,裁员潮频发,程序员们的未来似乎笼罩在一层不确定的迷雾之中。曾经,程序员这个职业因其高薪而令人艳羡,但背后的艰辛与压力,却鲜为人知。面对技术迭代加速、AI崛起和年轻血液的涌入,30岁左右的程序员正面临前所未有的挑战,就业市场上的“卷技术”、转向管理或另谋出路,成为摆在他们面前的三岔路口。在就业环境日益严峻的当下,AI大模型领域为程序员提供了新的职业希望。

2024-07-19 15:57:36 741

原创 【深度学习】PyTorch 图片识别分类器

因为这个行业不同于其他行业,知识体系实在是过于庞大,知识更新也非常快。作为一个普通人,无法全部学完,所以我们在提升技术的时候,首先需要明确一个目标,然后制定好完整的计划,同时找到好的学习方法,这样才能更快的提升自己。这份完整版的大模型 AI 学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费。

2024-07-19 15:20:16 351

原创 【深度学习】PyTorch的基本运算 与 构造简单神经网络模型

因为这个行业不同于其他行业,知识体系实在是过于庞大,知识更新也非常快。作为一个普通人,无法全部学完,所以我们在提升技术的时候,首先需要明确一个目标,然后制定好完整的计划,同时找到好的学习方法,这样才能更快的提升自己。这份完整版的大模型 AI 学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费。

2024-07-19 15:18:24 230

原创 30天速成AI产品经理,打造扎实基本功,抢抓行业机遇

在前瞻性布局培育新质生产力进程中,人工智能、先进计算等新一代信息技术逐渐实现与千行百业的相互渗透及深度融合,以“大模型+大数据+大算力”特征为代表的大智能领域全线发展高歌猛进,集成电路、绿色能源、生命科学等科技创新领域蓬勃发展。与之对应,相应前沿技术岗位人才在科技攻“尖”、产业向“新”进程中扮演关键角色。以ChatGPT为代表的生成式AI横空出世,头部企业抢先布局,积极探索生成式AI大模型的赋能边界和应用,催生了对应方向岗位人才的火热,相关岗位在整体互联网降薪的背景下,;

2024-07-18 16:57:54 673

原创 提示学习系列:prompt自然语言模板微调BERT/GPT2实现文本分类

人工设计提示模板是指,以自然语言的形式,人工地设计出一个带有为填充词槽的句子模板,将它加入原始的输入中,一齐输入给语言模型,让语言模型以概率的形式填充词槽,从而完成任务。我们以新闻主题分类为例,人工设计提示模型的示意图如下人工提示模型+BERT原始输入为“欧联杯双马对决”,人工设计的提示模板为“下面是一篇关于MM的新闻”,其中M代表[MASK],留下了两个词槽,输入给BERT,期望BERT用完型填空的方式预测出两个[MASK]位置分别为“体育”二字,即体育的条件联合概率最大。

2024-07-18 09:39:58 838

原创 Text2SQL系列:基于BERT微调+模板填充快速实现文本转DSL查询语句

因为这个行业不同于其他行业,知识体系实在是过于庞大,知识更新也非常快。作为一个普通人,无法全部学完,所以我们在提升技术的时候,首先需要明确一个目标,然后制定好完整的计划,同时找到好的学习方法,这样才能更快的提升自己。这份完整版的大模型 AI 学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费。

2024-07-18 09:36:35 616

原创 生成模型的两大代表:VAE和GAN

这也是无监督学习中的一个核心问题——密度估计问题。有两种典型的思路:1. 显式的密度估计:显式得定义并求解分布\\(p\_{model}(x)\\),如VAE。2. 隐式的密度估计:学习一个模型\\(p\_{model}(x)\\),而无需显式定义它,如GAN。

2024-06-21 17:44:01 909 2

原创 解决Few-shot问题的两大方法:元学习与微调

Few-shot问题或称为Few-shot学习是希望能通过少量的标注数据实现对图像的分类,是元学习(Meta-Learning)的一种。Few-shot学习,不是为了学习、识别训练集上的数据,泛化到测试集,而是为了让模型学会学习。也就是模型训练后,能理解事物的异同、区分不同的事物。如果给出两张图片,不是为了识别两张图片是什么,而是让模型知道两张图片是相同的事物还是不同的事物。

2024-06-21 17:41:19 736

原创 强化学习——基本概念

强化学习(Reinforcement Learning)是机器学习的一种,它通过与环境不断地交互,借助环境的反馈来调整自己的行为,使得累计回报最大。* 强化学习要解决的是决策问题——求取当前状态下最优行为或行为概率。* 强化学习包括智能体和环境两大对象,智能体是算法本身,环境是与智能体交互的外部。

2024-06-20 17:41:01 652

原创 深度学习——使用卷积神经网络改进识别鸟与飞机模型

因为这个行业不同于其他行业,知识体系实在是过于庞大,知识更新也非常快。作为一个普通人,无法全部学完,所以我们在提升技术的时候,首先需要明确一个目标,然后制定好完整的计划,同时找到好的学习方法,这样才能更快的提升自己。这份完整版的大模型 AI 学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费。

2024-06-20 17:37:14 698

原创 有监督学习——决策树、集成学习

香农提出的量化信息方式:其中:\(P_1,P_2\cdots P_n\)是随机事件每种可能结果的发生概率,因此\(P_1+P_2+\cdots+P_n=1\),熵\(H()\)的结果是一个大于等于零的值。熵越高,信息的不确定性越大,那么这条信息结果的价值越大。e.g.现在有三条来自未来的消息,哪条消息更高?一枚均匀硬币的投掷结果。一颗均匀骰子的投掷结果。一颗不均匀骰子的投掷结果(其中一面概率为0.9,其他的概率均为0.02)。

2024-06-19 17:56:58 1009

原创 大厂月薪7万招AI产品经理,看到要求我傻眼了!

AI产品经理终于火了!当前,无论国内国外,政策都倾斜加大对AI产业的投入和支持,国内BAT/TMD等一线大厂都在着力规划和布局AI战略。供需的不平衡,也导致AI产品经理的薪酬水涨船高。可以说,AI产品经理是未来十年都值得深耕的方向。所以,越早入局,越有优势。但是,面对这波浪潮,很多从事技术的同学想要入局,却又有很多疑虑:究竟用什么样的正确姿势,才能成功入局?不懂技术可以进入AI领域吗?AI产品经理的能力模型是什么?初入AI领域,需要掌握什么必备技能?……

2024-06-19 17:47:17 390

原创 2024请收好这一份全面-&-详细的AI产品经理从业指南

入行人工智能领域这段时间以来,从零到一把AI推荐系统产品化搭建了起来,也与很多同行AI产品经理小伙伴建立了联系。AI产品经理工作内容各异,不同AI产品化生命周期中更是大为不同,但对想入行AI产品经理的小伙伴来讲,有些经验还是可供参考的。

2024-06-19 17:42:52 877

原创 产品经理用好AI,最关键的一个点

AI大模型已经越来越强大了,我们要怎么才能把它变成生产力工具?根据最近的一个调研发现,即使是在产品经理这个群体里,能真正用好AI去激发生产力的人也只占6%,也就是说其实有94%的人都还不能很好的把生成式AI转化为生产力AI,这里摘录一些比较有代表性的“痛点”不知道如何优化提示词,缺乏提问技巧。从学习提示词技能到应用的效率比较低,真正应用的时候需要找回学习材料重新参考。受限于自己的知识结构和盲区,很难发掘Al更多的应用场景。

2024-06-18 22:21:11 440

原创 从0到1,揭秘AI产品经理的高薪秘诀,转型之路与实战资源全解析

随着算法模型的日益精进、计算能力的显著提升以及海量数据的积累,人工智能领域正以前所未有的速度蓬勃发展。在国家政策的积极推动、社会资本的强劲注入下,人工智能产业正处于技术快速进步的黄金时期,其影响力广泛渗透至教育智能化、智慧城市构建、安防系统的智慧升级、物联网的智慧应用、医疗健康领域的智慧革新,以及智能家居生活等多个垂直板块,带动了对专业人才需求的急剧增长。据统计数据显示,AI产品经理相较于具有相同工作经验的传统产品经理,其薪资水平最高可达到1.59倍之多,凸显了该领域对顶尖人才的高度重视及激烈争夺。

2024-06-18 22:09:06 1684

原创 AI大模型真的能让IT工程师薪资再起飞一次吗?

作为传统的IT从业者,开发工程师,测试工程师,数据分析师们,面对如此飞快的技术迭代,是否有了深深的危机感?过去两三年,本来就身处互联网行业寒冬,现在又要面对AI大模型带来的挑战,头不能更大了!

2024-06-17 19:27:08 340

原创 AI产品经理竞争越来越激烈,如何更快入行抢占红利得高薪?

如果你是关注行业趋势的产品经理,那你一定不难察觉:随着算法算力数据条件的成熟、国家政策的大力支持,当前人工智能赛道的竞争越来越激烈。与此同时,AI人才的抢夺战也越发火热:不少传统互联网产品经理都在探索进入AI领域的机会。那么,除了扎实的产品基本功,企业还看重哪些能力?我们收集了腾讯、YY和蚂蚁金服等公司的面试问题,总结后发现,他们往往关注面试者的这些方面:是否对AI行业有清晰的了解是否对AI赋能的场景有自己的认知和思考是否熟悉当下常见且较为成熟的AI技术,了解不同AI技术的适用场景。

2024-06-15 18:54:49 1351

原创 有监督学习——高斯过程

高斯过程(Gaussian Process)是一种假设训练数据来自无限空间且各特征都符合高斯分布(高斯分布又称“正态分布”)的有监督学习。 高斯过程是一种概率模型,在回归或分类预测都以高斯分布标准差的方式给出预测置信区间估计。

2024-06-15 18:18:09 777

原创 有监督学习——支持向量机、朴素贝叶斯分类

支持向量机(Support Vector Machine, SVM)最初被用来解决线性问题,加入核函数后能够解决非线性问题。主要优点是能适应`小样本数量` `高维度特征`的数据集,甚至是特征维度数高于训练样本数的情况。

2024-06-15 18:16:22 992

原创 有监督学习——梯度下降

梯度下降(Gradient Descent)是计算机计算能力有限的条件下启用的逐步逼近、迭代求解方法,在理论上不保证下降求得最优解。

2024-06-14 17:48:30 1060

原创 有监督学习——线性回归

有监督学习是通过已知的样本产生预测模型的学习方法,任何有监督学习模型都可被想象成一个函数

2024-06-14 17:43:15 565

原创 深度学习梯度与反向传播

在深度学习中,多元函数通常是 复合(composite)的,所以我们可能没法应⽤上述任何规则来微分这些函数。幸运的是,链式法则使我们能够微分复合函数。

2024-06-13 11:44:59 517

原创 Pytorch环境深度学习环境

因为这个行业不同于其他行业,知识体系实在是过于庞大,知识更新也非常快。作为一个普通人,无法全部学完,所以我们在提升技术的时候,首先需要明确一个目标,然后制定好完整的计划,同时找到好的学习方法,这样才能更快的提升自己。这份完整版的大模型 AI 学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费。

2024-06-13 11:34:49 1002

原创 疑惑...2024年是不是转行AI产品经理的好时机?

AI产品经理是专门负责人工智能(AI)产品开发、推广及优化的人员,最终的目的是确保开发的AI产品能够满足市场需求并具有可行性。看到这里,你有没有一点似曾相熟的感觉?这和产品的经理的定义不是非常相似吗~是的,AI产品经理虽然多了AI的加持,但是依旧没有脱离产品经理的基本框架。

2024-06-12 16:12:44 1243

原创 大模型高效微调-LoRA原理详解和训练过程深入分析

LoRA与训练目标是解耦的,但本文设定就是语言模型建模。以下将给出语言建模(可自然推广到序列建模)的基本符号定义,即最大化给定提示的条件概率(本质是极大似然估计)。给定一个参数为\(\mathbf{\Phi}\)预训练的自回归语言模型$ P_{\Phi}(y|x)$。\(x\)为输入,\(y\)为输出note: 为与原文符号一致,下文\(\mathbf{\Phi}\)、\(\mathbf{\Theta}\)、\(\mathbf{W}\)均表示模型参数全参数微调。

2024-06-12 10:17:29 929

原创 大模型高效微调详解-从Adpter、PrefixTuning到LoRA

目前NLP主流范式是在大量通用数据上进行预训练语言模型训练,然后再针对特定下游任务进行微调,达到领域适应(迁移学习)的目的。

2024-06-12 10:11:11 968

原创 年薪80w的AI产品经理技术知识合集

最近,有很多的小伙伴向我咨询,为什么他们学习了大量的产品相关知识,却依然难以转行成为AI产品经理。经过分析,我发现主要原因可以归结为三点:不系统、没产出、不懂技术。那么,如何才能突破这些障碍,成功踏入AI产品经理的行列呢?

2024-06-11 18:30:12 1024

原创 大模型高效微调详解-从Adpter、PrefixTuning到LoRA

大模型高效微调详解-从Adpter、PrefixTuning到LoRA

2024-06-11 16:03:02 907

原创 Langchain中改进RAG能力的3种常用的扩展查询方法

有多种方法可以提高检索增强生成(RAG)的能力,其中一种方法称为查询扩展。我们这里主要介绍在Langchain中常用的3种方法查询扩展技术涉及对用户的原始查询进行细化,以生成更全面和信息丰富的搜索。使用扩展后的查询将从向量数据库中获取更多相关文档。

2024-06-11 15:49:42 1013

原创 大模型调优方法:提示工程、RAGs 与微调对比

每一个搭建大语言模型应用的AI工程师都会面临一个难题,如何选择一个合适调优方法。就算是强大的预训练LLM也可能无法直接满足项目中的特定需求。如项目需要一个特定结构的应用程序,如预训练缺失上下文的重要文件,再比如有特定术语和结构的高专业性的行业领域,面对这些问题,需要有特定的方法来调整LLM。

2024-06-10 17:51:31 711

原创 大语言模型LLM的核心技术及应用场景案例的分析

自注意力机制(Self-Attention)是LLM中的关键组成部分。它允许模型在不同输入序列元素之间分配不同的权重,通过计算查询(Query)、键(Key)和值(Value)之间的相互关系,以便更好地捕捉长距离依赖关系。

2024-06-08 21:37:14 631

原创 【大语言模型基础】-详解Transformer原理

Transformer最开始用于机器翻译任务,其架构是seq2seq的编码器解码器架构。其核心是自注意力机制: 每个输入都可以看到全局信息,从而缓解RNN的长期依赖问题。

2024-06-07 17:02:37 635

原创 【大语言模型基础】Transformer模型Torch代码详解和训练实战

Transformer是由谷歌在17年提出并应用于神经机器翻译的seq2seq模型,其结构完全通过**自注意力机制**完成对源语言序列和目标语言序列的**全局依赖建模**。

2024-06-07 16:59:53 975

原创 传统的老程序员转向人工智能需要准备好这三件事情,你知道吗?

人类文明的进步有时候快的吓人,在我们父辈上街买菜还是以一毛为计量买菜的时代,其实过去了也没有多长时间。现在买菜接近10块为准了,正常在集市上喊着怎么卖?摊主喊着三斤,包含的意思是10块钱三斤。相隔这么多年物价涨了多少倍,按照数学量级来计算通货膨胀了多少倍了,这人还杂活啊,但现在老百姓依然平平稳稳活着,时代的进步不是我等小市民发个牢骚就行阻止的。科技发展的速度也是大的惊人,距离每家每户都用电话的固定座机,都还没有几年的时间,现在留个人电话留座机号,都会让人觉得是老古董了,也才没有几年的时间而已。

2024-06-06 19:08:57 1893

原创 【LLM应用】基于GPT3.5的代码编辑器Cursor试用-智能代码编辑助手

官网下载安装Cursor,然后创建一个代码文件。Ctrl + K生成, Ctrl + L提问。

2024-06-06 16:10:32 576

原创 【大语言模型基础】GPT(Generative Pre-training )生成式无监督预训练模型原理

ELMo:将上下文当作特征,但是无监督的语料和我们真实的语料还是有区别的,不一定符合我们特定的任务,是一种双向的特征提取。

2024-06-06 16:02:08 562

原创 开源大语言模型Llama3简介,以及Mac下的使用方法

Meta最近推出了Llama3,这是其Llama系列语言模型的最新版本。Llama3是一个基于Transformer架构的大型语言模型,旨在提供更高效和精确的自然语言处理能力。以下是关于Llama3的一些详细信息:

2024-06-05 15:33:43 799

原创 Ollama+FastAPI+React手把手构建自己的本地大模型,支持SSE

最近大家都在玩**LLM**,我也凑了热闹,简单实现了一个本地LLM应用,分享给大家,百分百可以用哦~^ - ^

2024-06-05 15:23:46 1039

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除