- 博客(12)
- 收藏
- 关注
RSS订阅原创 【踩坑记录】RuntimeError: CUDA error: CUBLAS_STATUS_NOT_INITIALIZED when calling `cublasCreate(handle)
后将cuda改为‘cpu’模式，发现报错为index溢出，定位错误在tokenizer，经检查发现是BERT和XLM的tokenizer中的pad_token_id是不同的，前者为0，后者为1，改正后，即可运行。（2）tokenizer和language model不匹配；经检查代码，发现匹配无误；（4）cuda版本问题；由于是改代码，前面代码未出现该问题，因此不考虑该假设。（3）维度存在不一致；经检查代码，类别数、隐向量和词向量维度都是正确的；（1）CUDA内存溢出；
2024-01-28 16:28:41
3033
2
原创 vscode远程连接服务器问题汇总
vscode远程连接服务器问题汇总吐槽问题1 服务器用户名和key改变后，无法port forwarding解决方案：问题二 建立连接过程中卡住或者报XHRfailed解决方案：问题3: 未知原因的could not establish connection吐槽vscode连远程真的很简单，只需一个ssh-remote插件，设置简单（相比pycharm）。但是总有一些小问题，比如连接不稳定，无需本地建立对应的文件（需要定期进行备份，防止服务器崩溃造成丢失文件等。配合terminus的sftp功能，使
2022-05-03 22:05:26
12737
15
原创 解决huggingface中模型无法自动下载或者下载过慢的问题
项目场景：调用hugging face公开模型数据集中的transformers模型。问题描述默认源在国内下载模型过慢，甚至不开始下载。原因分析：部分博客解决方案为：在from_pretrained中添加参数mirror="tuna" 将下载源替换为清华源。tokenizer = BertTokenizer.from_pretrained("bert-base-uncased", mirror="tuna")然而，清华源现在不支持hugging face的下载（2021.8月之后）。
2022-04-01 22:34:50
28543
原创 conda基本使用
conda基本使用1 conda作用2 基本操作2.1 源（channel）相关操作2.2 环境（env）操作2.3 包操作3 总结1 conda作用2 基本操作记录一些conda基本操作2.1 源（channel）相关操作pip等操作需要指定默认的下载源（例如清华源等）显示现有的源conda config --showchannels处可以看出目前的源包括默认源有5种新增源：conda config --add channels https://mirrors.tuna
2022-04-01 21:31:40
1470
原创 pytorch多GPU并行训练DistributedDataParallel应用和踩坑记录
1 DataParallel据说存在多个GPU之间显存不均衡的问题，因此我直接选择了pytorch所建议的DistributedDataParallel，为多机多卡设计，但同时也可以实现单机多卡，能够使得各个GPU之间负载均衡。2 DistributedDataParallel现在的DistributedDataParallel是基于多进程策略的多GPU训练方式。首先是单机多卡的方式上，针对每个GPU，启动一个进程，然后这些进程在最开始的时候会保持一致，同时在更新模型的时候，梯度传播也是完全一致的，
2021-10-26 16:10:04
3467
6
原创 linux服务器相关指令——后台运行进程
linux服务器相关指令将程序移到后台执行查看进程前后台切换参考链接：功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart流程图将程序移到后台执行nohup python -u test.py > test.log 2>&1 &
2021-08-30 22:28:24
562
原创 pytorch中文教程遇见问题记录
pytorch中文教程遇见问题记录复现1：pytorch图像分类器问题1: torchvision包中自带的数据集下载失败问题问题2: 包缺失问题问题3: 多线程问题复现1：pytorch图像分类器在学习pytorch中文教程，复现pytorch图像分类器过程中遇到的问题问题1: torchvision包中自带的数据集下载失败问题CIFAR尝试过其他博主的方法将类中url地址改为本地数据集地址，但是由于新的代码文件中包含md5验证码所以未能实现最终解决办法：多尝试下载几次以及开加速经过两个小时
2021-03-11 21:25:51
155
原创 Linux服务器安装pytorch & 踩坑记录
mac安装pytorch环境cpu版本环境管理安装pytorch包环境管理步骤1 安装anaconda 检查conda版本证明安装成功conda --version步骤2 新建pytorch虚拟环境conda create -n pytorch 注意：-n与–name等同 -n后是环境名称步骤3 列出所有环境名称 确认新环境创建成功conda info --envs 步骤4 切换到新创建的环境中conda activate pytorch安装pytorch包步骤1 安装pyt
2021-03-10 15:39:23
1851
2
原创 清华软院、清华计科、南大计算机、中科院自动化所夏令营保研过程贴
这里写自定义目录标题个人情况写在前面清华软院功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart流程图导出与导入导出导入个人情况本科院校： 大连...
2019-08-01 15:19:49
1949
3
原创 DFS入门 背包问题
目录DFS经典例题 背包问题思路代码实现写在后面DFS深搜（也可以称为回溯法），可以理解为不撞南墙不回头，只有一直搜索下去，直到不满足结果，返回到上层，重新选择分支。经典例题 背包问题有n个物品，每个物品的重量是w[i] 每个物品的价值是c[i]，现在背包最大容量是V，那么如何选择这n个物品可以使背包中的物品价值最大思路本题涉及到对每个物品的选择，即可以将其看作岔路口，选择或者不选择是...
2019-06-26 09:36:51
777
转载 Mac上java与SQL Server连接步骤
Mac上java与SQL Server连接步骤新手第一次写博客啦，尝试记录一下自己笨拙的过程，也可以给别人做做参考少走弯路 代码引用自博客 https://blog.csdn.net/u010924845/article/details/4539102使用JDBC连接 JDBC（Java DataBase Connectivity,java数据库连接）是一种...
2018-07-13 00:57:13
2660
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人