leSerein_-CSDN博客

原创【Pytorch】当num_workers ＞ 0时，程序卡住

问题描述：Dataloader设置num_workers > 0的时候，程序会在运行的某个时候卡住（随机的，不确定是什么时候）解决方案：在Dataloader中，加入。

2024-07-29 16:01:24 116

转载【转载】pytorch LayerNorm参数详解，计算过程

主要用于自己学习和记录，都是写的清晰容易理解的文章，均为转载，表明来源。

2024-07-08 15:51:24 31

原创 WeightedRandomSamplerDDP, 加权的DDP采样器

WeightedRandomSamplerDDP, 加权的DDP采样器

2024-05-28 11:25:28 251

原创 [linux] pytorch各种报错

【代码】[linux] pytorch各种报错。

2024-05-07 15:05:10 345 1

转载【转载】bypy：使用Linux命令行上传及下载百度云盘文件（远程服务器大文件传输必备）

如果有侵权会删除。由于众所周知的原因，国内不方便上谷歌云盘，所以很多开源项目的大数据集、预训练模型等也会同时提供百度网盘形式存储的下载链接。因为百度网盘本身Linux系统只提供了UI端，所以远程服务器的话就很难搞了，谁用远程服务器还会开UI啊……而这些文件动辄1-2G，我又不想下到本地，就想直接将这些文件转存到自己的网盘后，在服务器上直接下载。

2024-05-02 18:45:53 1037 1

原创【Pytorch】Squeeze-and-Excitation Networks

【Pytorch】Squeeze-and-Excitation Networks

2024-03-19 15:47:59 1113

原创【Pycharm】如何在pycharm中调试deepspeed，调试时常见的坑

【Pycharm】如何在pycharm中调试deepspeed，调试时常见的坑

2024-03-04 20:43:17 955

原创【NVCC，CUDA，NVIDIA驱动】装了pytorch，nvcc -V不能用，但能正常使用gpu

【NVCC，CUDA，NVIDIA驱动】装了pytorch，nvcc -V不能用，但能正常使用gpu

2024-03-03 15:25:38 5586

原创【Windows11】相关问题与解决方案

【Windows11】相关问题与解决方案

2024-03-03 11:12:06 1997

原创【Pytorch】各种维度变换函数总结

多数转载，来自于：[PyTorch各种维度变换函数总结](https://kangshitao.github.io/2020/11/21/pytorch-function/)

2024-02-20 11:53:28 1610 3

原创【Pytorch】从MoCo看无监督对比学习；从SupCon看有监督对比学习

多为转载，供学习和记录

2024-02-20 10:41:55 1642 1

输出维度的物理意义在于，每个查询都会得到一个对应的输出向量，这个输出向量是基于与该查询相关的所有键的信息加权的值向量。第一节介绍了attention的一些理解，事实上，给特征不同的关注度，即通过自己设计的方法，算出attention map再乘到或者作用到特征上，是更早期的attention。这表示，尽管注意力分数是基于查询和键的相似度计算的，但最终的输出是对值的加权，反映了值向量的维度而不是查询或键的维度。注意力机制的输出是值向量的加权和，因此输出的每个元素都处在值向量所在的空间，即具有相同的维度。

2024-02-01 21:45:07 1377 1

原创【pytorch】nn.linear 中为什么是y=xA^T+b

pytorch nn.linear

2024-01-30 21:00:26 608

原创【pycharm】常见问题与解决

【pycharm】常见问题与解决

2024-01-12 20:20:50 722 1

原创【字体，矢量图，matplotlib】Camera Ready中需要注意的几点

【字体，矢量图，matplotlib】Camera Ready中需要注意的几点

2024-01-11 12:39:51 551

原创【pytorch】pytorch中的高级索引

介绍pytorch的高级索引，是一些切片索引

2023-10-25 16:51:25 739

原创【openmpi】报错后可能有用的一个命令

【openmpi】报错后一个可能有用的script

2023-03-12 16:32:28 746 1

转载【转载】Linux安装CUDA 和 cuDNN，以及CUDA个人环境和系统环境的切换

Linux安装cuda和cudnn

2023-03-12 16:25:16 1718

转载【Pytorch】backward与backward_hook

pytorch中的backward和backward_hook用法，大部分为转载

2022-11-09 11:01:52 1596

原创【持续更新】python文件和字符串操作，linux常用命令, pytorch报错与解决

python文件和字符串操作，linux常用命令

2022-10-14 11:12:34 1840

原创【Office-Caltech-10、PACS、office31】迁移学习三个数据集介绍及下载链接

【Office-Caltech-10、PACS、office31】迁移学习三个数据集介绍及下载链接

2022-09-28 10:32:18 8905

转载【搬运】Python中等号赋值、copy、deepcopy的区别

【搬运】Python中等号赋值、copy、deepcopy的区别

2022-08-27 19:41:00 904

原创【pytorch】ResNet18、ResNet20、ResNet34、ResNet50网络结构与实现

ResNet18、ResNet20、ResNet34、ResNet50网络结构与实现

2022-07-24 17:21:39 29632 5

原创【深入浅出向】从自信息到熵、从相对熵到交叉熵，nn.CrossEntropyLoss, 交叉熵损失函数与softmax，多标签分类

【深入浅出向】从自信息到熵、从相对熵到交叉熵，nn.CrossEntropyLoss, 交叉熵损失函数与softmax，多标签分类

2022-07-21 12:22:00 1322 1

转载【转】pyhton中pycache文件夹的产生与作用

【转】pyhton中__pycache__文件夹的产生与作用

2022-07-15 15:00:14 221

原创 Matplotlib介绍，基本操作，及美化

Matplotlib介绍，基本操作，及美化

2022-07-09 18:58:12 817

原创【Pytorch中的常用操作】

pytorch常见操作

2022-06-12 20:43:32 1411

转载【转载：python的调用与pip打包】python的import与pip详解

python引用调用和pip

2022-05-28 23:05:39 1112 2

原创【Linux中shell命令】.sh文件种种操作

【Linux中shell命令】.sh文件种种操作

2022-05-23 22:39:21 18090

转载【转】gitee 图床因外链访问过多被封，我们该怎么办

全篇转载，原文链接：gitee 图床因外链访问过多被封，我们该怎么办文章目录一、事件起因二、方案选择三、资源替换1、解封原 gitee 库2、上床资源到 OSS3、单篇文章图片访问路径替换4、全文件夹图片访问路径替换四、小结一、事件起因今天下午正在思考人生呢，突然收到 gitee 官方发来的邮件赶忙上网查相关信息，发现 3.25 日 gitee 官网对仓库外链进行了一波清查好家伙，自己 typora 里有几百篇文章呢，现在全部变成了这种画风欣慰的是，

2022-05-22 11:20:34 1409 2

原创【Pytorch】物理cpu、逻辑cpu、cpu核数、pytorch线程数设置

物理cpu、逻辑cpu、cpu核数、pytorch线程数设置

2022-03-25 00:16:45 7343 6

原创【YOLOv3】COCO2014数据集的组织方式

COCO2014数据集的组织方式

2022-03-11 23:33:42 981

转载【转】pytorch_torch.transforms常用参数

mnist是灰度图，给出的应该是transforms.Normalize((0.1307 ), (0.3081 ))cifar10是transforms.Normalize((0.4914, 0.4822, 0.4465), (0.2023, 0.1994, 0.2010))imagenet是([0.485, 0.456, 0.406], [0.229, 0.224, 0.225])原文链接：https://blog.csdn.net/weixin_45885232/article/details/1

2022-02-24 18:35:39 513 1

MNIST官方数据集，torchvision加载亲测可用

空空如也