计算机视觉

原创 《2024国家自然科学基金青年基金》 相关申请注意事项解读

不能像23年一样选择10-20的资助。二 资助比例（2023）2024年 23.13%2004 对应 89。2005 对应 90。2006 对应 91。2007 对应 92。2008 对应 93。2009 对应 94。2010 对应 95。

原创 【已解决】LaTeX Error: Unicode character解决方法 提交arxiv的时候遇到报错LaTeX Error: Unicode character

2 在\begin{document}下方添加\begin{CJK}{UTF8}{gbsn}1 在引用包的位置中添加\usepackage{CJKutf8}3 在\end{document}的上方添加\end{CJK}

原创 [遇到问题][已解决]RuntimeError: CUDA error: invalid device ordinal

我的这问题是通过改成cuda:0解决的。

原创 【常用】【测速】ptflops库-参数Params、计算复杂度Flops

延迟/速度/每秒帧数 latency/speed/FPS latency/speed/FPS (单位s/FPS)注意：计算复杂度MACs、模型参数Param跟输入图像尺寸无关，速度FPS跟图像尺寸有关。（320x320时是17.52， 224x224时是17.52)1 安装 pip install ptflops。(3, 320, 320)是输入尺寸。3 分割算法上的使用范例。

原创 【常用】添加作者传记，部分期刊需要例如IEEE ACCESS TCVSVT

注意图片改成png后缀才行，jepg不行。

原创 引用论文bib信息解析，查看年、卷、期

53卷 01期。

原创 【遇到问题-已解决】RuntimeError: Attempting to deserialize object on a CUDA device but torch.cuda.

问题原因：采用的gpu是本机没有的，比如我的机器1个GPU但是我设置的是使用9卡就会导致这个问题。解决办法：这是因为gpu是'9'导致的，改成0就行。

原创 【遇到问题-已解决】 ModuleNotFoundError: No module named ‘torchvision.models.utils‘

1 首先，请确保你已经正确安装了torchvision。

原创 苹果笔记本(MAC)快捷键 /图标排序Control+Command+1/截图com+shift+4

⌃(control) + ⌘ + 1 自动整齐排列。⌘ + ⌥ + 5 按 “修改日期” 排序。⌘ + ⇧ + 句号键 显示/隐藏隐藏文件。⌃ + ⌘ + ⇧ + 4 截图到剪贴板。⌘ + ⇧ + ◀︎ 切换到上一个标签页。⌥ + ⌘ + ⇧ + V 纯文本粘贴。⌘ + ⌥ + 1 按 “名称” 排序。⌘ + ⌥ + 2 按 “种类” 排序。⌘ + ⌥ + 6 按 “大小” 排序。⌘ + ⇧ + G 打开“前往文件夹”⌘ + ⇧ + ► 切换到下一个标签页。拇指食指中指无名指向外划动 显示桌面。

原创 slurm指令

-gres gpu:1 使用的显卡数量。python xxx.py运行程序。-p RTX3090选择哪种显卡。-w node06 选择哪种节点。-J xxx 任务命名。srun一种运行方法。

原创 MedSegDiff： Medical Image Segmentation with Diffusion Probabilistic Model

它在Imagen、Latent Diffusion Models和Stable Diffusion等图像生成应用中表现出了令人印象深刻的生成能力，引起了社会的广泛讨论。实验结果表明，MedSegDiff在性能上明显优于最先进的SOTA方法，表明了该模型的gen可实现性和有效性。受DPM成功的启发，我们提出了第一个基于DPM的一般医学图像分割模型，我们将其命名为MedSegDiff。我们在三种不同图像模式的医学分割任务上验证了MedSegDiff，即眼底图像的。

原创 点云相关论文总结

点云Backbone 全链接 - PointNet++:点云检测 PointPillars:2D-3D 多模态融合 MVXNet:

原创 Kuaishou-【学习Diffusers 四】 读取模型参数 bin格式、safetensors格

2 safetensors格式文件的参数读取方法。1 拿到pipeline中的unet的办法。safetensors格式的参数读取方法。(state_dict) # 读入模型。4 将修改的unet放回pipeline。

原创 精确率（precision）、召回率(recall)、准确率

准确率的缺陷召回率定义。

原创 Diffusers use_ema的作用

原创 K-huggingface官网以及diffusers基本使用方法 https://huggingface.co

主要看这几个。

原创 Kuaishou-【学习Diffusers 一】随机种子控制生成 加载自己的UNet

或pipeline方法。

原创 [报错已解决]得到一个不期待的scale,图生图和文生图pipeline不同

需要看site-pakage里面的文件。

原创 [报错已解决]得到一个不期待的值added_cond_kwargs，图生图和文生图的pipline是不同的

而StableDiffusionPipline（文生图t2i）的self.unet输入里面多了一个added_cond_kwargs需要写。对照下图，做测试unet_2d_condition.py里面UNet2dConditionModel类的forward输入。因为pipeline是用的库里面的，我们改左侧condition里main的就行了。得到一个不期待的值added_cond_kwargs。左侧unet_2d_condition.py。右侧的t2i的xxxpipline.py。

原创 Kuaishou 中期考核-降低显存的关键

map_location='cpu'，读入的参数就会占用GPU。可以通过添加下面函数来检测GPU占用情况。# 4. 读入checkpiont参数。读入模型参数-且不占用显卡。

原创 深度学习以CPU方式读入模型参数

【代码】深度学习以CPU方式读入模型参数。

原创 diffusers中blip描述使用详解

5 k_v[t[0]] = t[1] 构成字典。6 img_list里面是所有图片名。2 blip读取代码。

原创 [跑代码-报错5]BK-SDM 运行中断

报错如下未查明原因。

原创 [diffusers]仅读取unet | 模型格式转化diffusion_pytorch_model.safetensors转为diffusion_pytorch_model.bin

格式是（diffusers格式）我从网上直接下载的模型路径。

原创 [已解决]diffusers加载的模型都被放在哪里了

【代码】[已解决]diffusers加载的模型都被放在哪里了。

原创 [遇到问题][已解决]Accelerate设置训练报错，端口问题

ValueError:配置了少于两个GPU id，并试图在多个GPU上运行。请确保为'——gpu_ids '指定至少两个，或者使用'——gpu_ids='all' '。我们设置端口是9999，只要再跑程序还是这个端口，这是因为我们的代码里设置了端口9999。运行如下，可以看出虽然 0，1 内存为主，但是其他卡内存为3m也被占用。然后设置2,3,跑另外一个程序。更改设置为，端口8888即可（），或者按照提示设置为0(

原创 [mac系统]利用换行符查找替换^p 报错 --caption_column‘ calue ‘test‘ needs to be one of: image

训练过程需要blip文件是metadata.json格式。测试过程需要的文件是txt格式。利用word查找替换。利用word查找替换。

原创 [运行diffusers报错] RuntimeError: Input type (c10::Half) and bias type (float) should be the same

我们先生成pipeline然后读取一个vae的网上模型，然后将这个AutoencoderKL送入pipeline里面的时候就会遇到这样的问题。因为pipe本身是half精度(float16)的，而新送进来的vae是flaot32的所以需要修改下精度。

原创 ubuntu 查看文件夹内文件数目ls -l | grep “^-“ | wc -l

主要是3个命令的组合ls、grep、wc。

原创 [跑代码-报错4]BK-SDM ConnectionError: Tried to launch distributed communication on port `29500`, but anot

ConnectionError:试图在端口' 29500 '上启动分布式通信，但另一个进程正在使用它。请指定一个不同的端口(例如使用' ----main_process_port '标志或在配置文件中指定一个不同的' main_process_port ')，然后重新运行脚本。要自动使用下一个开放端口(在单个节点上)，可以将其设置为“0”。** KD训练需要6秒。

原创 [跑代码-遇到问题-报错3]BK-SDM. KeyError: ‘up_blocks.0‘

但是unet的结构后面接的module之后才是down_blocks(不正常),unet_teacher的结构后面直接接down_blocks（正常）这个module事导致不能hook的原因。acts_stu没有读到dict。acts_tea读到dict。

原创 [跑代码-遇到问题-报错1]BK-SDM TypeError: __init__() got an unexpected keyword argument ‘logging_dir‘

现在的新版本的Accelerator不再是logging_dir改为。出问题的代码部分如下。

原创 显示隐藏文件 1 Ubuntu下 ls -a 2 Win下：查看-隐藏文件 3 Mac下: shift+commond+.

win查看-勾选隐藏文件mac。

原创 [全解析]Latex 图片Figure 设置说明

如果页面剩下的部分放不下，还是会跑到下一页的。h] 选项经常会出现不能正确放置的问题，所以常用 [ht]、[htbp] 等。PS：一般使用[htb]这样的组合，只用[h]是没有用的。这样组合的意思就是latex会尽量满足排在前面的浮动格式，就是h-t-b这个顺序，让排版的效果尽量好。1 Fig表示文件夹，里面方法beecy.pdf是图片文件。2 或者直接放在tex路径下直接放文件beecy.pdf,位置控制 h当前 t顶部 b底部!写法./beecy.pdf。

原创 【常用】添加通信作者标记符号、共同作者标记符号

添加包，2个小信息长得不太一样选一个用。然后在名字后面添加\Letter。1 添加通信作者的小信封。

原创 训练DiT报错ERROR:torch.distributed.elastic.multiprocessing.api:failed (exitcode: -9) local_rank: 0

运行Dit时，torchrun --nnodes=1 --nproc_per_node=8 train.py --model DiT-XL/2 --data-path /home/pansiyuan/jupyter/qianyu/data。此时是多卡计算看不到报错信息。

原创 [完美有效] Accelerate的使用说明

后面修改直接找到这个yaml文件进行修改即可。这里写的是0,1但是实际使用的是0卡。终端输入指令，生成问答页面。

原创 huggingface模型的默认下载/加载位置

huggingface模型的默认下载/加载位置。包、库、library的位置。

原创 please upgrade numpy version to ＞=1.20

pip install numpy --upgrade 没有pip。conda install numpy --upgrade 会报错。conda list numpy来查看numpy版本。似乎这个numpy要看numpy-base这个。

原创 快手ConnectionError

top然后查看站用处内存高的accelerate。因为运行的程序被中断导致。