- 博客(288)
- 资源 (11)
- 收藏
- 关注
RSS订阅原创 卷积报错：AttributeError: ‘Conv2d‘ object has no attribute ‘total_ops‘ (已解)
卷积报错：AttributeError: 'Conv2d' object has no attribute 'total_ops', Only Tensors created explicitly by the user (graph leaves) support the deepcopy protocol at the moment
2024-05-21 14:42:40
622
原创 CUDA error: the provided PTX was compiled with an unsupported toolchain.（已解决：多机多卡并行训练配置问题）
CUDA error: the provided PTX was compiled with an unsupported toolchain. 可行解决
2024-05-14 14:56:10
513
1
原创 [ WACV24]SBCFormer：快速、轻量级 神经网络模型 Efficient CNN-ViT hybrid neural network backbone
快速、轻量级hybrid神经网络for边缘AI，Vision Transformer
2023-11-08 16:35:13
561
6
原创 IEEE PDF eXpress报错: TimesNewRomanPS-ItalicMT, TimesNewRomanPSMT is not embedded； Font Helvetica
IEEE PDF eXpress报错：TimesNewRomanPS-ItalicMT, TimesNewRomanPSMT, Font Helvetica are not embedded
2023-11-05 18:26:49
796
2
原创 pytorch底层矩阵运算：How to check if PyTorch or Numpy is using OpenBLAS or MKL? &线性代数库BLAS(cblas_gemm示例)
检测pytorch使用哪种线性代数运算库（矩阵或矢量间线性代数）; BLAS, MKL, OpenBLAS及cblas_gemm矩阵运算代码.
2023-08-14 21:50:25
429
原创 分布式训练Warning: Grad strides do not match bucket view strides. This may indicate grad was not
由而导致的Grad strides不匹配问题。
2023-08-08 01:46:20
2190
原创 pytorch报错 ERROR:torch.distributed.elastic.multiprocessing.api:failed (exitcode: 1) local_rank:....
pytorch报错 ERROR:torch.distributed.elastic.multiprocessing.api:failed (exitcode: 1) local_rank:....
2023-06-26 14:08:28
10833
原创 多GPU训练报错：at least two devices cuda:1 and cuda:0；Caught ValueError in replica 0 on device 0
DataParallel和DistributedDataParallel多GPU训练时报错，RuntimeError: Expected all tensors to be on the same device, but found at least two devices, cuda:1 and cuda:0!
2023-04-26 13:06:39
1151
1
原创 分布式训练模型保存torch.save()、加载model.load_state_dict问题解析：Missing key(s) in state_dict，Unexpected key()
分布式训练模型保存torch.save()、加载model.load_state_dict常见问题：Missing key(s) in state_dict，Unexpected key()
2022-11-18 15:06:12
1015
原创 FLOPS(每秒浮点运算次数), TFLOP，Statistical vs. Computational Efficiency
FLOPS全称是floating-point operation per second,每秒浮点运算次数，用于衡量计算机的算力和执行效能。The difference between pure computational efficiency and statistical efficiency.
2022-10-20 03:37:32
5276
原创 Ubuntu 上VS Code更新后 Remote-SSH 无法连接服务器：failed to install the vs code server！
正常使用VS code SSH,退出VS code重新启动后,出现错误提示：Can't connect to the server,failed to install the vs code server.
2022-10-17 12:35:47
2442
原创 报Warning: variables__flops__or_params__ are already defined for the---ptflops can affect your code!
Warning: variables__flops__or_params__ are already defined for the---ptflops can affect your code!
2022-10-12 23:22:38
544
原创 .sh脚本调用服务器上conda虚拟环境 & CUDA版本与服务器GPU driver不匹配（ubuntu系统、pytorch）
无法调用服务器上的虚拟环境pytorch， CUDA initialization: The NVIDIA driver on your system is too old (found version 10010)
2022-10-04 00:27:27
731
原创 卷积复杂度计算、im2col算法、Normalization【实现方法解析】
计算复杂度分析，卷积官方代码分析，Batch Norm, Layer Norm, Group Norm 理解
2022-09-15 16:46:27
980
原创 pytorch报错：RuntimeError: CUDA error: CUBLAS_STATUS_ALLOC_FAILED when calling `cublasCreate(handle)`
多GPU分布式运行pytorch程序报错：RuntimeError: CUDA error: CUBLAS_STATUS_ALLOC_FAILED when calling ‘cublasCreate(handle)`
2022-07-13 16:22:27
6194
1
原创 PyTorch 分布式训练 (DP/DDP/torchrun/多机多卡) ＜笔记总结＞
PyTorch 分布式训练问题总结： (DP/DDP/torchrun/多机多卡)
2022-06-29 21:21:55
3330
原创 Python代码 时间消耗latency和空间(memory)消耗（详细剖析、求解）
Python代码 时间消耗和空间(内存)消耗（详细剖析、求解）Memit lineprofiler
2022-05-18 10:19:48
310
1
原创 arm-linux-gnueabihf-gcc 安装 OpenBLAS
参考：1.MIPS（arm）交叉编译 OpenBLAS 编译和安装 2.ubuntu18.04 安装OpenBLAS问题一：LAPACK make fails: “recipe for target ‘znep.out‘ failed” errorgfortran -O2 -frecursive -c -o zunt03.o zunt03.fgfortran -o xeigtstz zchkee.o zbdt01.o zbdt02.o zbdt03.o zbdt0...
2022-01-19 18:06:32
1988
原创 pytorch C++ 扩展：torch.utils.cpp_extension
torch.utils.cpp_extension-PyTorch 1.0 中文文档 & 教程
2021-12-24 14:39:46
638
原创 ARM NEON 程序debug: error识别arm neon intrinsics 命令, LD_LIBRARY_PATH shouldn‘t
/usr/lib/gcc/arm-linux-gnueabihf/6/include/arm_neon.h:5792:1: error: inlining failed in call to always_inline ‘vdupq_n_s32’: target specific option mismatch vdupq_n_s32 (int32_t __a) ^~~~~~~~~~~neon_test.c:94:13: note: called from here int32x4_t sum.
2021-12-24 10:50:46
1363
原创 ARM Neon 编程笔记一（ARM NEON Intrinsics, SIMD运算, 优化心得）
1. ARM Neon Intrinsics 学习指北：从入门、进阶到学个通透1.入门：基本能上手写Intrinsics1.1 Neon介绍、简明案例与编程惯例1.2 如何检索Intrinsics1.3 优化效果案例1.4 如何在Android应用Neon2. 进阶：注意细节处理，学习常用算子的实现2.1 与Neon相关的ARM体系结构2.2 对非整数倍元素个数(leftovers)的处理技巧2.3 算子源码学习（ncnn库，AI方向）2.4 算子源码学习（Nvidia caro..
2021-12-07 15:03:27
1773
2
原创 树莓派 切换python版本、安装pytorch、vscode、opencv-python、matplotlib
参考：1、将树莓派中默认python2切换python3_浪迹天涯的博客-CSDN博客 2、树莓派：树莓派4B+安装Pytorch版本1.6（python3.7） 3、树莓派4b安装vscode亲测可行。--相关操作（需要时候再转换）：把树莓派4B系统修改为64位...
2021-10-12 00:34:44
2110
原创 基于python numpy 手写实现 Batch Normalization
二 、基于python numpy，下面我们自己实现批量归一化层。import timeimport torchfrom torch import nn, optimimport torch.nn.functional as Fimport syssys.path.append("..") import d2lzh_pytorch as d2ldevice = torch.device('cuda' if torch.cuda.is_available() else ...
2021-10-04 20:29:27
1067
原创 transformer和functional.py错：Argument interpolation should be of type InterpolationMode instead of int
transformer和functional.py报错：Argument interpolation should be of type InterpolationMode instead of int
2021-09-24 23:50:19
5740
3
原创 Pytorch分布式报错1.non-zero exit status，2.cuDNN error:CUDNN_STATUS_INTERNAL_，3.CUDA error:illegal memory
1.returned non-zero exit status 1.One epoch之后报错，信息如下：RuntimeError: Expected to have finished reduction in the prior iteration before starting a new one. This error indicates that your module has parameters that were not used in producing loss. You..
2021-07-26 15:53:54
2661
转载 Rethinking Semantic Segmentation from a Sequence-to-Sequence Perspectivewith Transformers
重新思考语义分割范式——SETR转载from：https://zhuanlan.zhihu.com/p/348418189 请多支持原创一、论文信息标题：《Rethinking Semantic Segmentation from a Sequence-to-Sequence Perspectivewith Transformers》作者：Sixiao Zheng et al.（复旦大学 & 牛津大学 & 萨里大学 & 腾讯优图 & 脸书）文章：h...
2021-07-04 10:50:45
1249
原创 Ubuntu18.04 长按Back Space键 只能删除一个字符
问题描述：Ubuntu 系统一直使用正常，突然键盘只能按一个字符一个字符的删除，键盘迟钝。（可能是系统更新造成的系统设置重置）解决方案如图： 确保2处Repeat Keys 打开， 以及 Typing Assist 关闭。问题即可解决。...
2021-06-03 19:01:43
1114
原创 特征挖掘(四)--特征融合
基本概念在很多工作中，融合不同尺度的特征是提高分割性能的一个重要手段。低层特征分辨率更高，包含更多位置、细节信息，但是由于经过的卷积更少，其语义性更低，噪声更多。高层特征具有更强的语义信息，但是分辨率很低，对细节的感知能力较差。如何将两者高效融合，取其长处，弃之糟泊，是改善分割模型的关键。按照融合与预测的先后顺序，分类为早融合(Early fusion)和晚融合(Late fusion)。早融合(Early fusion): 先融合多层的特征，然后在融合后的特征上训练预测器（只在完全融合之后，才统
2021-05-07 14:48:48
1076
原创 特征挖掘三：主成分分析和奇异值分解
主成分分析(Principal components analysis)和奇异值分解(Singular value decomposition)在探索性数据分析和建模阶段都是非常重要的方法。当一组数据有很多变量(高维度数据)，而且变量直接不独立的时候，处理数据时会非常麻烦，常需要对原始数据进行降噪和降维处理。・主成分分析常用于解决用一个精简的变量集尽可能多地展示数据集的变异性这一统计问题。・奇异值分解常用于解决用一个低秩矩阵很好地表示原始数据这一数据压缩问题。...
2021-04-21 15:40:31
354
原创 package ‘car’ is not available (for R version 3.4.4)
Update version of R on Ubuntu:Ubuntu Packages For R - Brief InstructionsInstall R Get 5000+ CRAN Packages AcknowledgementsInstall RPackage for thecurrent R 4.0.release* are available for most stable Desktop releases of Ubuntu until their offic...
2021-04-16 22:49:17
776
1
原创 特征挖掘（一）：问题与方法总结
（一）维数灾难（Curse of dimensionality） 维数灾难就是说当样本的维数增加时，若要保持与低维情形下相同的样本密度，所需要的样本数指数型增长。从下面的图可以直观体会一下。当维度很大样本数量少时，无法通过它们学习到有价值的知识；所以需要降维，一方面在损失的信息量可以接受的情况下获得数据的低维表示，增加样本的密度；另一方面也可以达到去噪的目的。有两种办法试图克服这个问题：首先是特征提取（Feature extraction），通过组合现有特征来达到降维的目的；然后是特征...
2021-04-15 16:11:34
1821
原创 特征挖掘（二）：连续特征离散化方法
1定义：首先from wiki给出一个标准的连续特征离散化的定义：在统计和机器学习中，离散化是指将连续属性，特征或变量转换或划分为离散或标称属性/特征/变量/间隔的过程。这在创建概率质量函数时非常有用 - 正式地，在密度估计中。它是一种离散化的形式，也可以是分组，如制作直方图。每当连续数据离散化时，总会存在一定程度的离散化误差。目标是将数量减少到手头的建模目的可忽略不计的水平。2.当前状态current status早期，诸如等宽(equal-width)，等频(equal-frequen
2021-04-12 14:26:24
1366
原创 R 语言 ggplot2 scale_*_*()函数
1. ggplot中的scale_*_*()函数借助代码：help(package = "ggplot2")获取ggolot2中的所有函数名称，检索到scale_*_*，可以看到有近百个函数，总结下来，可以分为几个大类，分别是：scale_alpha_*() 【设置透明度】 scale_color_*() 或 scale_colour_*() 【设置边框/散点颜色】 scale_fill_*（) 【设置填充颜色和图例相关内容】 scale_linetype_*() 【设置线条样式】
2021-04-02 13:07:39
7249
Matlab 2015b Win64 Crack ,Matlab2015b 破解文档，已破解成功
2016-06-03
Large_Margin_Nearest_Neighbor_Classifiers
2013-12-09
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人