pytorch小白 记录

最新推荐文章于 2024-07-16 15:58:20 发布
最新推荐文章于 2024-07-16 15:58:20 发布
阅读量318 收藏
点赞数
分类专栏： 深度学习 文章标签： pytorch
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_36749157/article/details/100930875
版权
这篇博客记录了PyTorch小白的学习过程，涉及如何载入预训练的词向量，理解torch数据类型，以及网络结构设计。载入词向量时，通过word_to_idx和idx_to_word创建词向量矩阵。在PyTorch中寻找类似于TensorFlow的embedding_lookup函数。同时强调了在处理数据和模型时，注意数据类型和设备（CPU/GPU）的一致性。
摘要由CSDN通过智能技术生成

持续更新

1、载入已经训练好的词向量

逻辑

  • 已经训练好的词向量：word2vec glove等等
    1、从中生成一个word2id的字典，将每个单词/字映射到下标，得到字典word_to_idx， idx_to_word
    2、假设data中有n个单词/字，词向量维度为m，得到该数据集的词向量矩阵n*m
    3、词向量矩阵n*m word_to_idx， idx_to_word 根据这三个得到model的input，假设数据中有N个句子，得到的input N*max_sequence_len*m
  • 自己训练的词向量，保存的时候，矩阵下标和word_to_idx一一对应，直接进行第三步
  • tensorflow中有加快查找的函数embedding_lookup，torch中暂时没找到类似函数。后续再看看有没有更快的实现方式。

2、torch数据类型

最低0.47元/天 解锁文章
霸王国际
关注
专栏目录
Pytorch入门教程
专注大数据与人工智能技术分享，欢迎私信加群互相学习！
03-08 3万+
Pytorch学习总结:1.张量Tensor 张量是一种特殊的数据结构，与数组和矩阵非常相似。在PyTorch中，我们使用张量对模型的输入和输出以及模型的参数进行编码。 张量类似于NumPy的ndarray，除了张量可以在 GPU 或其他硬件加速器上运行。事实上，张量和NumPy数组通常可以共享相同的底层内存，从而无需复制数据。...
Pytorch 小白记事本 1
小胖鸡的博客
09-15 132
Pytorch 小白记事本 1 Python pip 安装与使用 下载就不多说了，我们从判断是否安装开始记录： pip --version pip 最常用命令 显示版本和路径 pip --version 获取帮助 pip --help 升级 pip pip install -U pip 如果这个升级命令出现问题 ，可以使用以下命令： sudo easy_instal...
Pytorch小白入门
David_Wang__的博客
08-18 266
这是我在b站上发现的比较好的教程，在听的过程中作了写笔记，特此与大家共勉。
【小白学习PyTorch教程】一、PyTorch基本操作
fengdu78的博客
08-02 2066
「@Author：Runsen」什么是 PyTorch？PyTorch是一个基于Python的科学计算包，提供最大灵活性和速度的深度学习研究平台。张量张量类似于NumPy 的n 维数组，此...
小白入手Pytorch深度学习（b站视频学习笔记）
最新发布
2301_80355452的博客
07-16 1203
人工神经网络，简称神经网络，模仿生物神经网络的结构和功能的数学模型，用与对函数进行估计或近似。（应用例如机器视觉和语言识别）每次迭代都需要把所有样本都送入，这样的好处是每次迭代都顾及了全部的样本，做的是全局最优化在torch中提供了数据集的基类torch.utils.data.Dataset，继承这个基类，我们能够非常快速的实现对数据的加载可知，我们需要在自定义的数据集类中继承Dstaset类，同时还需要实现两个方法：1.__len__方法，能够实现通过全局的len()方法获取其中的元素个数。
【小白学PyTorch】10.pytorch常见运算详解
fengdu78的博客
09-22 499
<<小白学PyTorch>>小白学PyTorch | 9 tensor数据结构与存储结构小白学PyTorch | 8 实战之MNIST小试牛刀小白学PyTorch...
新手小白搭建深度学习pytorch环境
qq_27038963的博客
06-29 95
此时pytorch、CUDA及相匹配的cudnn都有了，并不需要各个帖子说的那样各个包分别下载安装。，根据选项卡配置自己的pytorch环境，package一般选pip，language一般选python，最最最最最重要的是CUDA一定要选不超过上图提到的版本（没有的话可以在箭头处找老版本），复制圆框内的命令在cmd中执行。打开电脑的英伟达控制面板，记下CUDA的版本号，我的理解是这个版本号表示目前的显卡驱动所能支持的最高版本CUDA。若遇到“pip 不是内部或外部命令”的问题，参考。
纯小白安装pytorch必看教程
qq_44789021的博客
02-17 770
纯小白适用的超精简pytorch安装教程！
PyTorch小白学习笔记（零）
slm1130的博客
10-12 228
前言 PyTorch是由一下几个部分组成的库： torch：一个有强大GPU支撑的张量库，就像NumPy torch.autograd：一个tape-based自动微分库，支持Torch内所有的可微的张量运算 torch.jit：一个编译缓存（TorchScript），用来从PyTorch代码中创建可串行的和可优化的模型 torch.nn：深度集成的神经网络库，具有最大自由度的自动求导设计 torch.multiprocessing：Python多进程，但是具有神奇的进程间torch张量的内存共
pytorch安装记录
XNJaaa的博客
12-14 233
pytorch安装记录 安装pytorch的过程中遇到很多问题，要不然就是网速慢下载中断，要不就是出现各种问题。第一次安装出了很多错误，所以只好卸载Anaconda,重新下载。这一次终于安装成功了。我采用的是conda下载，步骤如下： 一、安装anaconda 这一步不过多介绍，csdn上有很多介绍。 二、打开Anaconda prompt 在上一步安装结束后，打开anaconda prompt界面。首先新建一个pytorch环境。 使用下面的命令行 conda create -n pytorch pyth
【小白学PyTorch】1.搭建一个超简单的网络
小白学视觉
06-05 535
点击上方“小白学视觉”，选择加"星标"或“置顶”重磅干货，第一时间送达文章目录：1 任务2 实现思路3 实现过程3.1 引入必要库3.2 创建训练集3.3 搭建网络3.4 设置优化器3.5 训练网络3.6 测试1 任务首先说下我们要搭建的网络要完成的学习任务：让我们的神经网络学会逻辑异或运算，异或运算也就是俗称的“相同取0，不同取1” 。再把我们的需求说的简单一点，也就是...
Pytorch入门学习
Barbara‘s Blog
07-11 1159
Pytorch 基本概念 张量（Tensor） PyTorch 张量(Tensor)，张量是PyTorch最基本的操作对象，英文名称为Tensor，它表示的是一个多维的矩阵。比如零维是一个点，一维就是向量，二维就是一般的矩阵，多维就相当于一个多维的数组，这和numpy是对应的，而且 Pytorch 的 Tensor 可以和 numpy 的ndarray相互转换，唯一不同的是Pytorch可以在GPU上运行，而numpy的 ndarray 只能在CPU上运行。 常用的不同数据类型的 Tensor 如下: 3
小白编程用Pytorch导入预训练模型&&设置不同学习速率
elysion122的博客
05-12 2943
前两天正好在做这个部分，参考了很多网友的做法，也去pytorch论坛查了一下，现在总结如下。建议还是自己单步调试一下看看每个参数里面的值是什么样的比较好。1.导入预训练的模型，预训练模型是现有模型的一个或者几个部分假设我有一个网络包含 pretrained和classify两个部分，每个部分分别有一些卷积层or回归层，pretrained部分有一个已经训练好的网络模型pretrained mode...
torch.nn.Module和torch.nn.LSTM 相关文档
Freaky_Wen的博客
10-13 1170
torch.nn 相关文档 搬运官方链接 class torch.nn.Module 所有网络的基类，你的模型也应该继承这个类。 import torch.nn as nn import torch.nn.functional as F class Model(nn.Module): def __init__(self): super(Model, self).__init__() self.conv1 = nn.Conv2d(1, 20, 5)# submodul
[LLM] 自然语言处理 --- Self-Attention(三) 知识点与源码解析
摩登都市天空---专栏
04-20 2246
在当前的 NLP 领域，Transformer / BERT 已然成为基础应用，而 Self-Attention 则是两者的核心部分，下面尝试用 Q&A 和源码的形式深入 Self-Attention 的细节。 一 Q&A 1. Self-Attention 的核心是什么？ Self-Attention 的核心是用文本中的其它词来增强目标词的语义表示，从而更好的利用上下文的信息。 2. Self-Attention 的时间复杂度是怎么计算的？ Self-Attention ..
pytorch系列： nn.Modlue及nn.Linear 源码理解
心有猛虎 细嗅蔷薇
01-23 6157
a
NLP系列项目一：skip-gram方法训练词向量（pytorch完整代码）
lyj223061的博客
08-14 2590
skip-gram方法训练词向量（pytorch完整代码） 欢迎移步小弟GitHub查看完整代码和训练使用的数据集 https://github.com/lyj157175/My_NLP_projects 尝试复现论文Distributed Representations of Words and Phrases and their Compositionality中训练词向量的方法. 实现Skip-gram模型，并且使用论文中noice contrastive sampling的目标函数。这篇论文有很多模
python中安装pytorch小白
11-15
以下是在Windows系统下使用Anaconda安装PyTorch的步骤： 1.打开Anaconda Prompt，创建一个新的虚拟环境（可选）： ```shell conda create --name pytorch_env ``` 2.激活虚拟环境： ```shell conda activate ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值