LuckyZrl7-CSDN博客

原创【深度学习】常用命令合集

SIZE : 本栏列出设备的容量大小信息。例如298.1G表明该设备大小为298.1GB，而1K表明该设备大小为1KB。RM : 本栏显示设备是否可移动设备。注意，在本例中设备sdb和sr0的RM值等于1，这说明他们是可移动设备。RO : 该项表明设备是否为只读。在本案例中，所有设备的RO值为0，表明他们不是只读的。TYPE :本栏显示块设备是否是磁盘或磁盘上的一个分区。MOUNTPOINT : 本栏指出设备挂载的挂载点。MAJ:MIN : 本栏显示主要和次要设备号。NAME : 这是块设备名。

2024-05-11 19:51:27 189 1

原创【Pytorch Lightning】backward和manual_backward的区别

如果你需要修改梯度或者在反向传播之前后执行某些自定义操作，如梯度裁剪（gradient clipping）、梯度钩子（gradient hooks）或者条件更新。

2024-04-12 10:31:47 680 2

原创【Pytorch Lightning】网络进行predict报错RuntimeError: received 0 items of ancdata

2. 错误的原因：dataloader加载数据时，pytorch多线程共享tensor是通过打开文件的方式实现的，而打开文件的数量是有限制的，当需共享的tensor超过open files限制时，即会出现该错误。1. 报错：RuntimeError: received 0 items of ancdata。

2024-01-01 19:37:03 620

原创 Linux远程服务器安装用户级别cuda（11.3）后续使用中退回原来版本10.1

6.再次用nvcc-V检查，就没问题了。4. ：wq，保存并退出编辑模式。2.点击i进入编辑模式。

2023-12-23 18:42:07 657 1

原创 Linux远程服务器安装lightning

2. 再装lightning。3. 连接不好就重开多试几次。1. 先装torch。

2023-12-23 18:33:20 457 1

原创神经网络训练过程中出现warning,不要忽视

参考修改后，警告消失，损失大幅下降。使用L1正则化的问题。

2023-11-23 13:08:36 277

原创给本地的pycharm配置远程linux服务器连接，并配置anaconda环境/安装用户级别的cuda和cudnn/安装pytorch/安装pytorch_lightning/配置清华源加速

第一次配远程服务器的环境，不算很顺利，想记录一下整个过程，梳理复盘一下整个过程。

2023-11-16 14:22:32 660 1

原创 Pytorch Lightning 跑一半断掉，报错RuntimeError: received 0 items of ancdata

在linux服务器上跑pytorch ligtning代码，跑到第四个epoch突然断掉，报错RuntimeError: received 0 items of ancdata，再跑一直跑不起来，一直报错RuntimeError: received 0 items of ancdata。最大线程为32，就设置为了32，设置过大，改小num_woker就跑起来了。

2023-11-16 13:16:46 196 1

原创 Linux远程服务器运行pytorch_lightning代码，本地实时查看tensorboard结果

服务器不支持浏览器功能，想实时监控代码运行情况，我们需要使用本地查看tensorboaed。1. 建立本地服务器和远程服务器的通信，将tensorboard映射端口与本地端口连接起来。3, 在本地浏览器中输入第一步设置的本地地址，即可在本地实时查看tensorboard结果。2. 在远程服务器中cd到项目目录下，运行常规查看tensorboard代码。

2023-11-16 13:01:31 260 1

原创 Pytorch_Knowlegde_Note

random.sample() 和 numpy.random.choice() 都是可以指定抽样的个数，一次性从列表中不重复地抽样出指定个数的元素，其中 random.sample()默认就是不重复抽样（不放回的抽样），而numpy.random.choice()默认是可以重复抽样，要想不重复地抽样，需要设置replace参数为False。JSON 是用于存储和交换数据的语法。从速度上看，当抽样数量小的时候，random.sample方法比numpy.random.choice方法快很多；

2023-10-15 22:27:46 29