zxw的博客

原创 Open-Webui和RAGFlow无法加载ollama模型

【代码】Open-Webui和RAGFlow无法加载ollama模型。

原创 NVIDIA Jetson系列，ARM架构创建docker容器

【代码】NVIDIA Jetson系列，ARM架构创建docker容器。

原创 notpad++正则化，利用关键字符删除整行

首先，ctrl+f,选中[替换]，勾选正则表达式（可以勾选[匹配大小写]，不用勾选[匹配新行]）。在[查找目标]框输入[^(.*)"car_no_clean"(.*)$\n]。在$后加上\n，可以将被替换的行直接删除，不加则会将被替换的行变为空格。

原创 yolov5训练的时候txt标签中出现负值

【代码】yolov5训练的时候txt标签中出现负值。

原创 通用的ARM64架构镜像

此链接包含x86架构和ARM架构的pytorch镜像，镜像里面已下载好各种第三方库，GPU版本的pytorch可用。缺点：镜像有点大。

原创 华为鲲鹏+银河麒麟v10 安装 docker-ce

设备：硬件：仅有ARM处理器，无GPU和NPU，操作系统麒麟银河V10，Kunpeng-920#######参考原链接#########在 arm64(aarch64) 架构服务器上基于国产化操作系统安装 docker 服务。

原创 麒麟银河操作系统下的英伟达驱动出现如下错误

麒麟银河v10

原创 车载算法服务自启动Dockerfile

Dockerfile

原创 构建独立的redis容器

redis-server、docker

原创 JetPack

jetson jetpack

原创 训练yolov5出现的错误

yolov5和pytorch

原创 Kylin v10操作系统+ARM处理器+nvidia T4显卡编译GPU版本pytorch

ARM架构GPU 版本pytorch成功编译

原创 银河麒麟操作系统安装nvidia-container-toolkit

ARM架构下安装nvidia-container-toolkitcurl -s -L https://nvidia.github.io/nvidia-docker/centos8/nvidia-docker.repo | sudo tee /etc/yum.repos.d/nvidia-docker.reposudo yum install -y nvidia-container-toolkitsudo systemctl restart dockernvidia-docker 存储库配置

原创 ARM架构上YOLOv5算法部署错误

报错：AttributeError: ‘Upsample‘ object has no attribute ‘recompute_scale_factor‘ 的解决方案解决办法：降低PyTorch的版本到1.9.0No module named ‘skimage‘解决办法：pip install scikit-image

原创 PyTorch和TensorFlow轮子下载链接

#支持amd和x86,操作系统win、macos、linuxtensorflow · PyPI#支持amd、x86和aarch架构，操作系统win、macos、linuxtorch · PyPIarm架构下安装说明，参考链接如下：基于arm架构的ubuntu18 .04安装Anaconda3 + pytorch+python3.9_qq_41426807的博客-CSDN博客_arm ubuntu 安装教程...

原创 在ARM64平台下安装TensorFlow和Pytorch

#TensorFlow安装包Releases · lhelontra/tensorflow-on-arm · GitHub#PyTorch安装过程​​​​​​基于arm架构的ubuntu18 .04安装Anaconda3 + pytorch+python3.9_qq_41426807的博客-CSDN博客_anaconda arm#PyTorch安装包torch · PyPI...

原创 ‘_RSAPublicKey‘ object has no attribute ‘verifier‘

'_RSAPublicKey' object has no attribute 'verifier'错误解决：pip install cryptography==36.0.2 #将版本返回到36.0.2版本；

原创 ARM64架构下安装PyTorch、TensorFlow以及python第三方库出现的错误

OSError: Could not find library geos_c or load any of its variants ['libgeos_c.so.1', 'libgeos_c.so']解决办法Ubuntu系统执行：sudo apt-get install libgeos-devCentOS系统执行：sudo yum install geos-devel报错：Check the logs for full command output解决：检查是否有这个驱动libpq.

原创 ResNet、ResNeXt

原创 GPU compute capability（算力)和CUDA版本冲突问题

RuntimeError: CUDA error: no kernel image is available for execution on the deviceCUDA kernel errors might be asynchronously reported at some other API call,so the stacktrace below might be incorrect.For debugging consider passing CUDA_LAUNCH_BLOCKING=1.

原创 英伟达显卡算力查询--A5000、RTX30系列以及GTX

显卡算力查询链接：https://developer.nvidia.com/zh-cn/cuda-gpus#computeCUDA GPUs | NVIDIA Developerhttps://developer.nvidia.com/cuda-gpus?target_os=Linux&target_arch=x86_64&Distribution=Ubuntu&target_version=18.04&target_type=deb_local#computep

原创 RuntimeError: cuDNN error: CUDNN_STATUS_NOT_INITIALIZED

GTX 10系类显卡生成的容器CUDA10.2、cudnn7、Pytorch1.8.0、python=3.8可以训练。把镜像加载到RTX 20系类显卡容器训练出现上述错误：RuntimeError: cuDNN error: CUDNN_STATUS_NOT_INITIALIZED目前解决办法：降低pytorch版本，PyTorch=1.7.1,python=3.7怀疑可能是：1.显卡驱动版本问题。2.显卡显存被占用太多。3.还可能是docker镜像并不能完美适应，10系类和20系类

原创 Error response from daemon: linux runtime spec devices: could not select device driver ““ 解决办法

CentOS7.7离线安装docker之后docker run --gpus all 之后出现上面问题。docker run 不带--gpus all没有出现错误，所以需要安装nvidia-container-runtime。离线安装nvidia-container-runtime：1、在一台联网的机器上执行这两个命令distribution=$(. /etc/os-release;echo $ID$VERSION_ID)curl -s -L https://nvidia.github.io

原创 CentOS7.7离线安装驱动、docker、CUDA和cudnn

第一步：驱动安装1.预、查询命令1、Linux查看显卡信息：（ps：若找不到lspci命令，可以安装 yum install pciutils）lspci | grep -i vga2、使用nvidia GPU可以：lspci | grep -i nvidia3、查看显卡驱动cat /proc/driver/nvidia/version一、前提准备（参考：https://www.cnblogs.com/gollong/p/12655424.html）1.安装依赖环境：yum

原创 用pytorch训练EfficientNet网络。出现错误IndexError: dimension specified as 0 but tensor has no dimensions

if input.size(0) != target.size(0):IndexError: dimension specified as 0 but tensor has no dimensions原因：train或者validation dataset 样本数量与batchsize不是整除的关系解决：调整为整除关系，不再报错（从最大batchsize递减慢慢测试出来的）...

原创 pytorch1.9.0 TypeError: __array__() takes 1 positional argument but 2 were given

#降低pillow的版本即可pip install pillow==8.2.0 TypeError: __array__() takes 1 positional argument but 2 were given#Steps to reproduce the behavior:import torchimport torchvision.transforms as transformsfrom PIL import Imagetfms = transforms.Compose(..

原创 VScode配置libtorch环境（ubuntu18.04+libtorch1.7.0+pytorch1.7.0模型）

出现这个错误的原因是：terminate called after throwing an instance of 'c10::Error'。解答：下面三个.json里面libtorch和build的路径没有给对，是路径错误tasks.json{ "version": "2.0.0", "tasks": [ { "type": "shell", "label": "example-app", //lauch.json preLaunchTask "command": "

转载 深度学习学习基本概念：batch_size、epoch、 iteration

Note:以识别为例，输入RGB图像，batch=16,在全部训练样本中随机不重复的抽取16张图像作为一个批次，在批次中单独一张图像进行卷积（卷积向下取整），比如卷积层滤波器个数为32，经过卷积之后输出32个特征图，假如类别个数位1万类，这张图像经过整个网络输出得到1万个值，最大的值对应的类别就是这个图像训练出的结果（网络训练的结果：图像对应的类别），16张图像最后都会学到一个结果，作为本次迭代的...

转载 帕累托最优

转自：https://baike.baidu.com/item/帕累托最优/1768788?fr=aladdin 帕累托最优（Pareto Optimality），也称为帕累托效率（Pareto efficiency），是指资源分配的一种理想状态，假定固有的一群人和可分配的资源，从一种分配状态到另一种状态的变化中，在没有使任何人境况变坏的前提下，使得至少一个人变得更好。帕累托最优状...

转载 计算机视觉的终极目标

计算机视觉的终极目标：让计算机自动理解图片(视频)的内容。这个终极目标的核心其实可以拆解为一下几个任务：1. 让计算机理解图片的场景(咖啡厅, 教室, 博物馆, 等等),2. 理解场景中包含的物体(餐具,交通工具,人, 动物等等),3. 理解物体所在图片中的位置(bounding box边界框的坐标, 物体的边界点),4. 理解物体之间的关系和行为(是在交谈, 体育比赛,对抗, 等等),...

原创 Ubuntu操作系统挂载点设置

/boot 1000MEFI 1000Mswap 8G-16G/ 余下所有上面是组装服务器的技术人员告诉我的，顺序不变；另外他告诉我，可以选择自动分区（目前还没试过）此外，我在网上找了点资料Device for boot loader installation:(选择默认还是自己选)，组装服务器的人员告诉...

翻译 硬盘分区的表示方法

硬盘的三种接口：IDE硬盘，它们的名字应该是/dev/hda1、/dev/hda2等；SATA或者SCSI硬盘，它们的名字则是/dev/sda1、/dev/sda2等。硬盘分区的表示方法：那么什么是hda和sda呢？它们分别是Hard Driver Number A和SCSI Driver Number A的简写，也就是说，hd和sd指出了硬盘的接口类型，后面的...

翻译 磁盘格式转换

转换磁盘格式需要清空磁盘中的所有分区和数据，所以在操作之前，一定要保存好磁盘中所有重要数据。1.Diskpart #进入命令提示符2.list disk #磁盘列表3.select disk 0 #选择你要进行转换的磁盘4.Clean #清空磁盘5.convert mbr #将硬盘引导模式转换为MBR分区convert命令的...

翻译 UEFI启动和Bios（Legacy）启动的区别

关于UEFI启动和Bios（Legacy）启动的区别:UEFI启动是一种新的主板引导项，被看作是有近20多年历史的BIOS的继任者，其优势在于可以提高电脑开机后，进入操作系统的启动速度。uefi是一种更快捷快速的电脑启动配置，它的全称是“统一可扩展固件接口”(Unified Extensible Firmware Interface)，接下来我们就为大家详细介绍什么是uefi启动。 U...

转载 分区表类型：MBR和GUID区别

转载地址：https://www.dujin.org/11274.htmlMBR分区方案无法支持超过2TB容量的磁盘,也即3TB硬盘以MBR分区方案分区,有三分之一容量会认不到。（前几天帮师兄安装系统，当进行分区时总是有一部分机械硬盘容量读不到，当时我用就是MBR分区。）主引导记录（Master Boot Record，缩写：MBR）之所以叫“主引导记录”，是因为它是存在于驱动器开始部...

原创 根据文本路径将文件夹下的子文件夹里面的图像重新resize固定大小，并将固定好的大小图像，以同样的命名文件夹及图像名字放到另外一个文件夹下

# -*- coding: utf-8 -*-import os.pathimport PIL.Imagefrom PIL import Imageimport osimport cv2from PIL import Imagecount = 0with open('Scenedatapro111.txt', 'r') as lines: for line in li...

翻译 移动硬盘不能正常读取

把移动硬盘插入笔记本电脑，以前还真没有遇到这种问题，经过查看，移动硬盘接通电脑后，仍然可以听到叮咚的移动硬盘连接上的声音，而且移动硬盘转动声音正常，手触摸有震动感，移动硬盘的指示灯正常，打开我的电脑，可以看到显示出移动硬盘的盘符，但是就是打不开。这样就说明他的移动硬盘没有物理硬件上的故障问题，说明硬盘本身是好的，只是软件问题。首先，更换一条数据线，结果仍然一样无效，说明不是数据线的问题。...

原创 pip&conda使用指南

# to upgrade pippip install pip -U国内常用的源清华大学 https://pypi.tuna.tsinghua.edu.cn/simple/阿里云 http://mirrors.aliyun.com/pypi/simple/中国科技大学 https://pypi.mirrors.ustc.edu.cn/simple/豆瓣(douban) http:/...

原创 将xml标签数据转化成txt文本（YOLO v3）

# _*_ coding:utf-8 _*_import xml.etree.ElementTree as ETimport pickleimport osfrom os import listdir, getcwdfrom os.path import joinsets=[ ('2007', 'train')]#sets=[ ('2007', 'train'), ('2007'...

原创 用python语言提取视频帧

import cv2 import os #要提取视频的文件名，隐藏后缀 sourceFileName='111' #在这里把后缀接上 video_path = os.path.join("", "", sourceFileName+'.mp4') times=0 #提取视频的频率，每50帧提取一个 frameFrequency=50 #输出图片到当前目录vedio文件夹下 outP...