自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(82)
  • 收藏
  • 关注

原创 对于一个33岁的人来说,现在转行AI大模型还来得及吗?

在职场生涯中,33岁似乎是一个尴尬的年龄。许多人在这个阶段已经定型,难以寻求新的突破。然而,随着科技行业的飞速发展,人工智能成为了新时代的宠儿。那么,对于一个33岁的人来说,现在转行AI大模型还来得及吗?答案无疑是肯定的。总之,33岁转行人工智能并非遥不可及。只要勇敢迈出第一步,付出努力,相信每个人都能在这个充满机遇的行业中找到属于自己的位置。人生没有太晚的开始,关键在于你是否敢于挑战自己。

2024-07-29 16:46:46 770

原创 聊聊Transform模型

从之前的RNN系列到现在的Transformer模型,是一个演进的过程,技术的实现与迭代并不是一蹴而就,而是一个持续演进的历程。如果一开始就从Tranformer的模型机制来学习,知识的不全面以及欠缺就会导致懵逼甚至看不懂又不理解。

2024-07-29 10:23:31 395

原创 聊聊RNN与Attention

Attention Mechanism,称为注意力机制。基于Attention机制,seq2seq可以像我们人类一样,将“注意力”集中在必要的信息上。

2024-07-29 10:16:23 285

原创 聊聊RNN与seq2seq

seq2seq模型也称为Encoder-Decoder模型。顾名思义,这个模型有两个模块——Encoder(编码器)和Decoder(解码器)。编码器对输入数据进行编码,解码器对被编码的数据进行解码。此时编码器编码的信息浓缩了翻译所必需的信息,解码器基于这个浓缩的信息生成目标文本。

2024-07-28 08:45:00 148

原创 如何30天成功转行成为AI产品经理?如果你也想转行到AI,赶紧进来抄作业,快点上车吧~

随着AI技术的快速发展,AI产品经理成为了备受瞩目的职业。如果您也想抓住这个机遇,不妨跟随这份30天快速入门指南,开始您的AI产品经理转型之旅。

2024-07-27 18:46:49 1322

原创 聊聊RNN&LSTM

用于解决输入数据为,序列到序列(时间序列)数据,不能在传统的前馈神经网络(FNN)很好应用的问题。时间序列数据是指在不同时间点上收集到的数据,这类数据反映了某一事物、现象等随时间的变化状态或程度,即输入内容的上下文关联性强。

2024-07-27 10:39:13 342

原创 聊聊基于Alink库的特征工程方法

`OneHotEncoder` 是用于将类别型特征转换为独热编码的类。独热编码是一种常用的特征编码方式,特别适用于处理类别型特征,将其转换为数值型特征。 对于每个类别型特征,OneHotEncoder 将其编码成一个长度为类别数量的向量。 每个类别对应一个维度,如果样本的该特征值为该类别,则对应维度置1,其他维度置0。

2024-07-27 10:37:37 260

原创 互联网产品经理转型升级:如何成功转身为AI产品经理

互联网产品经理转型AI产品经理,需要具备坚定的信念、丰富的知识和实践经验。只要紧跟行业发展趋势,不断提升自己,就一定能成功转型,实现个人价值。在此过程中,保持开放的心态,勇于挑战,相信您会在AI领域取得辉煌的成就。

2024-07-26 19:56:00 958

原创 聊聊基于Alink库的主成分分析(PCA)

主成分分析(Principal Component Analysis,PCA)是一种常用的数据降维和特征提取技术,用于将高维数据转换为低维的特征空间。其目标是通过线性变换将原始特征转化为一组新的互相无关的变量,这些新变量称为主成分,它们按照方差递减的顺序排列,以保留尽可能多的原始数据信息。

2024-07-26 10:45:21 286

原创 聊聊基于Alink库的随机森林模型

随机森林(Random Forest)是一种集成学习(Ensemble Learning)方法,通过构建多个决策树并汇总其预测结果来完成分类或回归任务。每棵决策树的构建过程中都引入了随机性,包括数据采样和特征选择的随机性。 随机森林的基本原理可以概括如下:

2024-07-26 10:43:51 822

原创 大模型格局变天:Llama3.1 诞生

相信大家翘首企盼的都是同一个主角,Meta藏到现在的王牌、最被社区看好能直接叫板GPT-4o的新一代开源大模型—Llama 3.1系列,终于正式发布了。鉴于4月公开的两个Llama 3小参数模型8B和70B表现不俗,令开发者们对\*参数版本的强悍性能充满期待。

2024-07-25 15:23:34 702

原创 聊聊基于Alink库的推荐系统

基于物品的协同过滤算法(Item-based Collaborative Filtering),Alink提供了相关的组件。模型训练为离线批式训练,对应组件为ItemCfTrainBatchOp,得到ItemCf模型。基于此模型可以进行多种推荐,但不是每种推荐方式使用该ItemCf算法都可以得到较好的效果。Alink只提供了适合该算法的推荐方式:评分预测(ItemCfRate)、根据用户推荐物品(ItemCfItemsPerUser)、计算相似物品(ItemCfSimilarItems)。考虑到每种推荐需要

2024-07-25 10:24:19 593

原创 聊聊基于Alink库的决策树模型算法实现

决策树模型再现了人们做决策的过程,该过程由一系列的判断构成,后面的判断基于前面的判断结果,不断缩小范围,最终推出结果。

2024-07-25 10:22:14 257

原创 AI浪潮中的产品经理,技能升级与创新引领

随着AI技术的不断成熟和普及,AI产品经理将成为企业中不可或缺的角色。他们不仅能够推动产品创新,还能够引领行业趋势,为公司带来可持续的增长。对于有志于投身AI领域的个人而言,成为一名AI产品经理,意味着站在科技与市场的交汇点,拥有无限的职业发展潜力。

2024-07-24 18:55:37 1585

原创 聊聊神经网络的基础知识

激活函数的作用在于决定如何来激活输入信号的总和。数学表达式如下:图表示如下:通常神经元用一个○表示,在明确神经网络的动作下,可以明确显示激活函数的计算过程。如下,这两个图是等效的。因为这个行业不同于其他行业,知识体系实在是过于庞大,知识更新也非常快。作为一个普通人,无法全部学完,所以我们在提升技术的时候,首先需要明确一个目标,然后制定好完整的计划,同时找到好的学习方法,这样才能更快的提升自己。

2024-07-24 11:29:21 692

原创 聊聊预训练模型的微调

`Transformers` 提供了一个 `Trainer` 类,处理微调在数据集上提供的任何预训练模型。 完成所有数据预处理工作后,只需执行几个步骤即可定义 Trainer。 最困难的部分可能是准备运行 `Trainer.train()` 的环境,因为它在 CPU 上运行速度非常慢。 如果没有设置 GPU,可以在 Google Colab 上访问免费的 GPU 或 TPU。

2024-07-24 11:26:38 563

原创 转行大模型,风口预计就一年,明年市场就饱和了!

恕我直言,就这几天,各大厂都在裁员,什么开发测试运维都裁,只有大模型是急招人。你说你不知道大模型是什么?那可太对了,你不知道说明别人也不知道,就是要趁只有业内部分人知道的时候入局!尤其是干程序员的,绝对要抓住这个机会,我不是危言耸听,经历过Java、Python、大数据的,都应该知道,每个新技术,风口就那么多年,技术迭代的很快。

2024-07-23 16:51:44 706

原创 聊聊预训练模型的微调

`Transformers` 提供了一个 `Trainer` 类,处理微调在数据集上提供的任何预训练模型。 完成所有数据预处理工作后,只需执行几个步骤即可定义 Trainer。 最困难的部分可能是准备运行 `Trainer.train()` 的环境,因为它在 CPU 上运行速度非常慢。 如果没有设置 GPU,可以在 Google Colab 上访问免费的 GPU 或 TPU。

2024-07-23 10:13:35 743

原创 聊聊HuggingFace如何处理大模型下海量数据集

Pile是一个英语文本语料库,由EleutherAI创建,用于训练大规模语言模型。它包括各种各样的数据集,涵盖科学文章、GitHub代码库和过滤后的web文本。训练语料库以14GB块的形式提供,你还可以下载几个单独的组件。从PubMed Abstracts数据集开始,这是PubMed上1500万份生物医学出版物的摘要语料库。!Dataset({})可以看到,这里有15518009行、2列的数据。# output:这看起来像是一篇医学文章的摘要。

2024-07-23 10:11:15 768

原创 又一新兴岗位在崛起!这才是程序员未来5年最好的就业方向!

2024下半年: 你还在只关心 GPT升级,AI大模型“落地战”打得火热吗?殊不知,更“致命”的代码大模型,正在像一日千里的GPT一样,已悄然快速升级!改变着程序员下半场的职业命运…

2024-07-22 15:36:20 675

原创 聊聊HuggingFace Transformer

如上概述了HuggingFace Transformer相关的项目组件及背景逻辑,比较基础,蛮重要的,这些相关的基础点都是通用的。在理解大模型与NLP上都是相辅相成。因为这个行业不同于其他行业,知识体系实在是过于庞大,知识更新也非常快。作为一个普通人,无法全部学完,所以我们在提升技术的时候,首先需要明确一个目标,然后制定好完整的计划,同时找到好的学习方法,这样才能更快的提升自己。这份完整版的大模型 AI 学习资料已经上传CSDN

2024-07-22 11:26:54 590

原创 聊聊Hugging Face

HuggingFace是一个开源社区,提供了开源的AI研发框架、工具集、可在线加载的数据集仓库和预训练模型仓库。HuggingFace提出了一套可以依照的标准研发流程,按照该框架实施工程,能够在一定程度上规避开发混乱、开发人员水平不一致的问题,降低了项目实施的风险及项目和研发人员的耦合度,让后续的研发人员能够更容易地介入,即把HuggingFace的标准研发流程变成所有研发人员的公共知识,不需要额外地学习。

2024-07-22 11:23:54 920

原创 聊聊Embedding(嵌入向量)

简单来说,嵌入是用向量表示一个物体,这个物体可以是一个单词、一条语句、一个序列、一件商品、一个动作、一本书、一部电影等,可以说嵌入(Embedding)涉及机器学习、深度学习的绝大部分对象。这些对象是机器学习和深度学习中最基本、最常用、最重要的对象,正因如此,如何有效表示、学习这些对象就显得非常重要。

2024-07-21 08:45:00 1703

原创 聊聊语言模型与知识图谱

语言模型泛指:大语言模型LLM、通用模型GLM。 语言模型也是知识库。基于语言模型下的实现,比如ChatGPT,BERT,ChatGLM等等,这类知识库就像是已经人为处理好、编排好、可直接使用的知识库。

2024-07-20 08:45:00 396

原创 35+程序员的新生机,转战AI大模型,拥抱未来风口

在新冠疫情后的大环境下,各行各业的就业情况都变得异常艰难,互联网行业更是首当其冲,频频爆出裁员的消息。对于程序员来说,这无疑是一个巨大的挑战。一方面,降本增效、AI技术的爆火导致岗位变少;另一方面,互联网的飞速发展又在不断地吸引年轻的竞争者进入市场。在这种环境下,程序员面临着前所未有的压力。面对这样的困境,程序员们不得不开始思考自己的职业发展。有人选择继续卷技术,不断提升自己的竞争力;有人选择转管理岗,寻求职业的稳定;而更多的人则在考虑转行。转行并非易事,但在这个时代,转行到AI大模型领域。

2024-07-19 15:50:04 1178

原创 精通Prompt,激发大语言模型300%潜能

prompt template就是一个prompt的模板,通过prompt template,我们可以快速的生成多个prompt。基本上prompt template已经帮我们描述好了场景,要做的事情。我们只需要填入具体的内容即可。假如你是一个金融公司的理财经理,请你分析一下{stock}这只股票。

2024-07-19 10:43:54 655

原创 大语言模型的开发利器langchain

简单来说,langchain是一个基于大语言模型只上的开发框架,有了他,我们就可以轻松在各种大模型之上进行实际应用的开发。langchain的主要特点有两个,第一点就是组件化。langchain提供了各种封装好的组件供我们使用,大大缩短了我们开发的时间。第二点就是提供了工具链,可以组装各种组件,从而实现更加复杂的功能。有了langchain的各种工具,现在你就可以快速开发一个属于你自己的LLM应用啦。因为这个行业不同于其他行业,知识体系实在是过于庞大,知识更新也非常快。

2024-07-19 09:57:32 600

原创 年薪可达百万!想进入AI行业却不懂编程?一文解锁零编程基础也能驾驭的9大AI岗位

企业对炙手可热的AI人才争夺日趋激烈,除了AI技术人才,能够探索AI应用的人才,将AI工具融入工作流程,以提高生产率、节省时间的人才,以及能够连接技术端与业务端的人才也是很多企业的目标。因此催生了AI领域的全新职位。以下九种与AI相关的岗位无需编程技能即可胜任,岗位具体薪资会根据公司规模及求职者经验有所浮动。

2024-07-18 13:46:25 832

原创 使用ollama + AnythingLLM快速且简单的在本地部署llama3

因为这个行业不同于其他行业,知识体系实在是过于庞大,知识更新也非常快。作为一个普通人,无法全部学完,所以我们在提升技术的时候,首先需要明确一个目标,然后制定好完整的计划,同时找到好的学习方法,这样才能更快的提升自己。这份完整版的大模型 AI 学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费。

2024-07-18 11:57:45 349

原创 langchain中的LLM模型使用介绍

LLM是大语言模型最基础的模式,chat模式的底层就是基于LLM实现的。后续我们会详细介绍chat模式,尽请期待。因为这个行业不同于其他行业,知识体系实在是过于庞大,知识更新也非常快。作为一个普通人,无法全部学完,所以我们在提升技术的时候,首先需要明确一个目标,然后制定好完整的计划,同时找到好的学习方法,这样才能更快的提升自己。这份完整版的大模型 AI 学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费。

2024-07-18 11:53:39 617

原创 ChatGPT火了,AI产品经理的春天来了!

最近,ChatGPT火得一塌糊涂,简直就像一颗超级明星,把所有人的目光都吸引了过来。微软看到这股势头,果断放弃了元宇宙,全身心投入到AI的怀抱。各大公司和有钱的大佬们也坐不住了,纷纷跳进AI的池塘,都想搞出个中国的ChatGPT,觉得这玩意儿能彻底改变我们做软件的方式,带来一波新的生产效率大爆炸。有位老前辈说过,人要成功,得自己拼命干,但也不能忽略时代的大潮。作为产品经理,如果我们想赶上AI这趟快车,那就得亲自下场,不能错过这波AI带来的大好机会。不过,想成为AI产品经理,可不是件容易的事。

2024-07-03 17:58:07 248

原创 常见激活函数图与数学表达式汇总

因为这个行业不同于其他行业,知识体系实在是过于庞大,知识更新也非常快。作为一个普通人,无法全部学完,所以我们在提升技术的时候,首先需要明确一个目标,然后制定好完整的计划,同时找到好的学习方法,这样才能更快的提升自己。这份完整版的大模型 AI 学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费。

2024-06-21 17:52:34 546

原创 PyTorch下使用MNIST训练GAN

由于 MNIST 数据集图像为灰度图只有一个通道,因此只需要设置单个通道的 mean 与 std 即可。这里的取值,可以是将图像像素值\[0,255\] 缩放至 \[0, 1\]后求得均值和方差,也可以是根据经验设置,即 mean=0.5, std=0.5。

2024-06-20 17:52:15 712

原创 PyTorch下,使用list放置模块,导致计算设备不一的报错

在复现 Transformer 代码的训练阶段时,发生报错:RuntimeError: Expected all tensors to be on the same device, but found at least two devices, cuda:0 and cpu!

2024-06-20 17:47:39 760

原创 PyTorch中实现Transformer模型

因为这个行业不同于其他行业,知识体系实在是过于庞大,知识更新也非常快。作为一个普通人,无法全部学完,所以我们在提升技术的时候,首先需要明确一个目标,然后制定好完整的计划,同时找到好的学习方法,这样才能更快的提升自己。这份完整版的大模型 AI 学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费。

2024-06-20 17:45:44 558

原创 机器学习常见的sampling策略 附PyTorch实现

print(inf)')')每个类的采样概率可抽象为:\(p_j=\frac{n_jCn_i^q}\),\(p_j\)表示从j类采样数据的概率;\(C\)表示类别数量;\(n_j\)表示j类样本数;因为这个行业不同于其他行业,知识体系实在是过于庞大,知识更新也非常快。作为一个普通人,无法全部学完,所以我们在提升技术的时候,首先需要明确一个目标,然后制定好完整的计划,同时找到好的学习方法,这样才能更快的提升自己。

2024-06-19 17:59:53 1026

原创 AI人工智能产品经理,就该这么学!

想入行AI人工智能产品经理,该如何学习呢?随时AI的兴起,AI产品经理开始爆火,很多功能性产品经理想转行做AI产品经理。转行的原因,这个仁者见仁智者见智。唯一的共同点就是,大家都看好AI行业的发展前景,及可以拿到高薪。为了帮助大家花小钱办大事,馆长经过1个多月的收集整理,推出了这份“AI人工智能产品经理资料包” ,涵盖了AI大模型入门学习思维导图、精品AI大模型学习书籍手册、视频教程、实战学习等录播视频。

2024-06-19 17:34:12 703

原创 拥抱AI浪潮,手把手教你做AI产品经理

ChatGPT的爆火,让人看到了新的生产力发展方向,微软也因此放弃了元宇宙,ALL In AI,各大巨头和资本也陆续进入,誓要打造中国版的ChatGPT,并觉得人工智能可以改写现有的程序应用场景,带来新的生产力变革。一位长者曾经说过,一个人的命运啊,当然要靠自我奋斗,但是也要考虑到历史的进程。作为产品经理,我们只有躬身入局,才能不会错过这次人工智能的浪潮。主动改变是红利,被动改变是后退!

2024-06-19 17:22:37 631

原创 AI浪潮下24年毕业生的就业机遇,人工智能高薪优选

据教育部数据统计,2024高校毕业生规模预计达1179万人,将再创历史新高,“就业难”仍是当前大学毕业生需要直面的问题。在此背景下,选择一个就业前景好的专业尤为重要。如果说2023是人工智能爆发的一年,那么2024年,人工智能的影响力将进一步增强,它对我们的生产生活、学习工作的影响将越来越明显,未来发展前景非常广阔。软件工程师、高级网络工程师、爬虫工程师、系统架构师、算法工程师、数据挖掘工程师、深度学习工程师、风控工程师等。

2024-06-17 17:59:50 667

原创 抢占人工智能行业红利,前阿里巴巴产品专家带你15天入门AI产品经理

当互联网行业巨头纷纷布局人工智能,国家将人工智能上升为国家战略,藤校核心课程涉足人工智能…人工智能领域蕴含着巨大潜力,早已成为业内共识。面对极大的行业空缺,不少人都希望能抢占行业红利期,进入AI领域。传统互联网PM、在校生、传统行业从业者……都有机会借助人工智能浪潮,进入AI 产品经理岗位,实现个人价值,甚至驱动一个时代的改变。然而当下,已经有很多人工智能技术层面上的资料,却很少有专门传授如何成为和做好AI产品经理经验的干货。

2024-06-15 19:00:16 1319

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除