icewithzero-CSDN博客

原创 pytorch训练时的显存占用递增，out of memory

pytorch进行训练的时候，占用的显存总是不停的上涨，直到out of memory，检查训练日志，发现reserved memory远大于allocated memory，而且allocated memory会波动但不会稳定上涨，reserved memory会稳定上涨。在记录损失的时候，把整个tensor变量给保存了下来，这就导致在完成一次前向推理和反向传播之后，由于损失tensor被保留了下来，导致计算图无法被正常销毁，因此导致reserved memory不停增大。查过资料后发现是损失值的问题。

2024-10-28 11:50:05 229

原创服务器配置免密github

服务器配置github

2024-04-19 19:58:14 169 1

原创 vscode配置公钥连接服务器

vscode无密码连接服务器，公钥配置

2024-04-19 17:13:21 532 2

原创将conda虚拟环境迁移到新的服务器上

由于服务器系统崩了，需要新建环境，就把之前备份的conda虚拟环境传到了服务器上，这里迁移的只是envs文件。迁移完成后，首先要修改虚拟环境下的pip文件。把最上面那行的路径改成新位置的路径。和现系统的不一致，需要替换成现系统的。完成之后激活虚拟环境，运行。，这是因为虚拟环境对应的。

2024-04-19 16:55:42 595 1

原创使用Git，误把大文件加入本地暂存区

在使用github管理项目的时候，不小心在.gitignore中黏贴了一段论文中的内容，导致commit时本应被git忽略的几个大文件夹被加入了本地缓存区，导致push失败。

2024-04-15 15:41:35 242

原创 ssh -T git@github.com连接成功，但是push失败

ssh -T git@github.com连接成功，但是push失败

2024-01-18 17:11:22 571 1

原创 github连不上去，可能是因为服务器上有多个私钥

服务器连不上github，可能是因为服务器上有多个上有多个私钥。

2024-01-18 17:05:45 383 1

原创 LLM中的K-V cache

K-V cache

2024-01-17 20:45:01 1637

原创服务器中的lxd无法启动：

服务器 lxd 容器异常重启

2024-01-15 22:00:50 490

原创使用pytorch的distributeddataparallel遇到GPU0显存不均衡

使用pytorch的distributeddataparallel遇到GPU0显存不均衡

2024-01-15 21:47:02 443

原创 pip 安装失败

配置一个新的python环境，发现装不了依赖库，各种换源之后依然没有效果，后来发现是开了VPN的问题！

2023-03-08 16:23:26 117

原创 python生成高斯蒙版

python 高斯 mask

2023-03-08 16:16:21 206

原创 maskrcnn_benchmark 报错 target = target.resize(image.size)---＞‘list‘ object has no attribute ‘resize‘

在maskrcnn_benchmark执行train_net.py的时候报了一个错误：‘list’ object has no attribute ‘resize’。

2022-07-07 11:20:20 711 1

原创清华源地址

清华源地址

2022-06-30 10:17:37 1179 1

原创 python打包成的exe自动打开拖拽到其上的文件

用pyinstaller打包成exe文件拖入该exe程序，windows会将文件名作为程序的第2个参数import sysfilename = sys.argv[1]下面是你打开文件的逻辑[1]: https://ask.csdn.net/questions/917588?spm=1005.2026.3001.5635&utm_medium=distribute.pc_relevant_ask_down.none-task-ask-2defaultOPENSEARCHRate-1-917588-a

2022-06-30 09:49:01 1193

qq_42296251的博客