Dinsanity-CSDN博客

按理说，model.from_pretrain 方法应该直接从这个bin 文件里导入ckpt数据，为何还会报错呢？这个文件是Qwen2-7B 模型文件内自带的，用于指示ckpt中的参数和safetensors文件的对应关系。因此这次的报错原因是，model.from_pretrain() 一并读取了这个文件，想要根据这里的。事实上，我的pretraining 的language model ckpt 是保存在。，但在代码中修改model保存方法，以safetensor的方式存储。

2024-12-18 16:21:53 547

原创使用tensorboard可视化训练日志

使用tensorboard可视化训练日志

2024-12-10 16:25:09 234

原创 Linux 对比两个文件的区别

linux 对比两个文件的区别

2024-12-10 16:12:06 127

原创 Linux 杀掉所有python进程

一行命令终止所有python进程

2024-12-10 16:07:00 669

转载 Linux中加速文件删除

linux加速文件删除

2024-12-10 15:58:27 148

原创 Linux上快速压缩与解压缩（zip， tag.gz）

linux 多线程快速压缩与解压缩

2024-12-10 15:46:47 1954

原创 git push与pull冲突

pull和push是git的常用操作。但当如下操作发生时，会产生如下冲突：（1）本地代码train.py发生改动（2）train.py没有被push到远程repo，就尝试从远程repo执行pull操作而这些改动会与从远程仓库拉取的更改产生冲突。Git 不允许直接覆盖你的本地改动，因此需要你先处理这些改动。

2024-12-05 14:42:49 221

原创如何实现一个本地git repo与两个远程git repo同步

git 为项目管理带来了很大的便利，但有的时候我们需要与不同的远程仓库同步。比如在内网环境下，我们使用gitlab，在公网环境下我们使用github。而本地PC可以同时访问到内网与公网，因此，可以借助本地PC这个媒介，与两个不同环境下的git远程仓库无缝同步，从而提升效率。

2024-12-04 11:01:25 506

原创 ssh 公/私钥配置

t: 密钥类型, 可以选择 dsa | ecdsa | ed25519 | rsa;-f: 密钥目录位置, 默认为当前用户home路径下的.ssh隐藏目录, 也就是~/.ssh/, 同时默认密钥文件名以id_rsa开头. 如果是root用户, 则在/root/.ssh/id_rsa, 若为其他用户, 则在/home/username/.ssh/id_rsa;-C: 指定此密钥的备注信息, 需要配置多个免密登录时, 建议携带;

2024-11-04 11:27:47 2122

原创使用pycocoeval进行ImageCaption任务评测

ImageCaption任务是CV以及mllm研究中的基础任务。在这个blog中，我们介绍如何使用pycocoevalcap这个package评测模型的captioning能力。

2024-10-25 18:07:22 2375 2

原创 Python基础教程学习笔记（一）:基础知识

前言参考教材：[挪]芒努斯.利.海特兰德著的《Python基础教程（第三版）》基本运算方法1.四则运算>>> 1+23>>> 1-2-1>>> 1*22>>>1/20.5#注意，除法运算的结果为小数，即浮点数2.整除运算（1）向下圆整法一：使用双斜杠。这种运算方法得到的是向下圆整的结果。例子如下：>>>10//3 3 #10/3=3.333...，经过向下圆整（即返回数轴上此数左边距离

2021-02-27 19:55:46 572 1