- 博客(59)
- 收藏
- 关注
原创 PP-PicoDet算法训练行人检测模型
PP-PicoDet模型特点:方案选择PP-PicoDet轻量化模型,主要看中PP-PicoDet体积小、速度快、精度较高的优势,非常适合本项目的部署环境和性能要求。同时,飞桨提供的预训练模型也可以最大程度上提升模型的收敛速度和精度。
2023-11-21 10:30:48 1948 1
原创 labelimg 和 labelme 的安装和使用
可以直接保存在同一文件夹中,也可以保存时指定输出文件夹。labelme标注后的标注文件为json格式。重新安装labelimg启动即可。降低python版本至3.9。操作和labelimg差不多。
2023-11-20 15:42:17 440
原创 PaddleDetection训练目标检测模型
生成预标注 --save_results 保存推理结果,需要修改推理源码,保存推理结果至json文件。官网地址:https://developer.android.com/studio。创建label_list.txt,写入标注数据的类别。1,用labelimg标注voc格式的标注数据。2,下载JDK,SDK,NDK,CMake。标注-训练-预测-标注-训练。
2023-11-18 21:55:19 2760 1
原创 使用gradio部署自己的AI应用 AI对话 和 AI绘画
1,对前端不是很熟悉,电脑没有很高的配置,又不想自己多花钱,如何自己不花一分钱搭建一个有前端页面并且接入了本地化部署的对话和绘画应用呢?
2023-11-14 00:07:00 915
原创 ollama+openwebui 部署本地自定义模型
通过ollama后端+openweui前端,搭建和gpt网站一样的体验效果,阿里云公网ip+port,完成公网访问本地应用。配置内网穿透,实现公网访问。
2024-08-08 16:58:18 809
原创 nltk下载报错
搞了半天,真的麻烦,什么改ip什么的,科学上网什么的都不行,rawgit有cmudict,但是git官方里面没有cmudict模块,就是这么简单,用wsl ubuntu怎么都下载不下来,但是用windows,也没改ip什么的,一下载就到本地了。把下载的文件随便拖到下面中的文件夹之中,我是直接放在第一个。找一台windows电脑,
2024-06-08 10:10:54 290
原创 LLaMA-Factory 微调训练
1,vllm安装很多坑,pytorch版本和cuda版本必须保持一致兼容,使用pytoch的docker镜像可用省事很多,先看pytorch的版本,pytorch版本11.8,12.1,最好是cuda11.8版本的cuda和torch。三,vllm部署(不一定是llama3的模型,自己根据 llama3_vllm.yaml 配置修改就行,配置文件中也可用修改用huggingface部署)2,vllm启动会预先分配一定的显存,也可用自行修改,如还有其他应用要启动,可用调低一些。1,数据集的准备和配置。
2024-05-21 19:09:03 1554
原创 docker 建一个nginx容器,对外提供静态文件服务
想要实现文件浏览,必须要在nginx.conf里的http{}里和default.conf里的server{}里添加autoindex on。想要实现文件浏览,必须要在nginx.conf里的http{}里和default.conf里的server{}里添加autoindex on。访问时:http://localhost:80/nginx。访问时:http://localhost:80/nginx。挂载主机和nginx的配置文件,修改主机文件,nginx文件也会修改。
2023-12-11 21:50:55 1638
原创 Huggingface模型和数据集批量下载
本地跑AI应用的时候,模型动不动就是十几个G,总是因为下载模型的问题,卡住时间,Huggingface是国外的网站,国内访问难免会不稳定,用git lfs clone下载大文件的时候,总是会断掉,非常不方便,请求下载,requests获取到所有的下载链接,模拟下载,并且创建不同的文件夹用。此程序可以帮你稳定的下载Huggingface上的数据集和模型。来存放模型,下载有进度条和断点续下载。
2023-12-06 18:57:02 1224
原创 训练lora小模型
准备对应lora风格的模型,比如你要训练动漫人物,就找一个二次元风格的大模型,当作底膜训练。右键 install.ps1,powershell打开,会自动安装需要的环境。国外sd大模型网站(科学):https://civitai.com。国内sd大模型网站:https://www.liblib.art。准备30-100张图片,图片风格就是要训练的lora模型的风格。如果图片不够清晰,也可以使用sd的高清化模块,先2倍高清化图片。把处理好的图片放在train目录下。本文使用sd自带的打标签功能。
2023-12-04 09:45:45 1859
原创 Docker详解
3,在控制面板打开程序,然后点击启动或关闭windows功能,勾选Hyper-v,然后重启。docker默认安装路径在C盘,并且无法修改,需要创建软连接修改。Settings-Docker Engine中的末尾添加。2,打开任务管理器查看CPU虚拟化是否已经启用。双击运行Docker Desktop。docker修改镜像存放路径。
2023-11-27 22:55:15 2881
原创 远程服务器相关操作
P port 注意是大写的P, port是指定数据传输用到的端口号。(将-C标志传递给ssh,从而打开压缩功能)ssh配置文件:/etc/ssh/sshd_config。-B 使用批处理模式(传输过程中不询问传输口令或短语)第一次连接时输入密码会生成密钥,后续就可以直接连接了。-p 保留原文件的修改时间,访问时间和访问权限。scp [参数] [原路径] [目标路径]传输本地文件至远程服务器。-r 递归复制整个目录。-q 不显示传输进度条。-r 递归复制整个目录。
2023-11-18 21:49:20 34
原创 Python Requests批量下载音频
python: requests:发送http请求 urllib.request:根据url和名字下载图片到指定路径 json:把str转成json格式 os:根据名字创建文件夹。Requests设置请求头Headers: https://blog.csdn.net/ysblogs/article/details/88530124。配置: https://blog.csdn.net/HeyShHeyou/article/details/90045204。1,抓包查看所有音频类型,,id,name。
2023-11-17 16:05:18 197
原创 python调用阿里云长语音合成api
long_tts=True,选择是否开启长语音合成。直接上代码,参考着自己调通就行了。长语音合成需要在阿里云付费开通。
2023-11-15 00:07:31 467
原创 windows部署ChatGLM-6B
conda,docker,python venv,还是直接安装,安装自己需求来就行。ChatGLM-6B目录下新建model文件夹,模型和配置文件全部都放进去。cmd nvcc -V查看cuda版本,pytorch安装对应的版本。修改 web_demo.py 代码中的模型路径为本地路径。官网:https://pytorch.org/windows私有化部署chatglm。2,python-requests方式。总结:拉源码-装环境-启动程序。1,先进入python环境。2,或直接命令行运行。
2023-10-07 18:31:12 256
原创 飞浆云端GPU环境部署stable diffusion
2,飞浆云端部署可以不需要本地的gpu环境,只需要一个飞浆账号,但是如果不充钱,每天可以使用的时间有限制,一天4个小时,应该也够玩了。3,飞浆部署的好处是不用管其他的环境python,git,cuda都安装配置好了,只需要自己安装sd即可正常使用,非常方便。如果碰到缺少模型文件或者配置的错误,手动下载之后在传入paddle项目中即可,大文件通过挂在数据集的方式传进去。1,本文的部署方法可以看到完整的sd-webui界面,和本地部署sd效果一样,可以自己安装插件和上传选择模型。可以添加模型的数据集。
2023-10-06 22:58:16 836
原创 win本地部署stable diffusion
cmd输入nvidia-smi查看显卡默认配置,显卡装上之后会有默认的显卡驱动,但是在启动sd时可能会报错cuda相关错误,保险起见,提前安装cuda,版本选择nvidia-smi查看的相同版本,配置环境变量之后cmd输入nvcc -V输出cuda版本安装成功。此时的python用的是sd启动时自动创建的venv虚拟环境中的python,如果安装之后发现没用,可以进入venv虚拟环境中重新安装。安装时,用默认安装地址,后续启动sd时不容易报错,选择默认添加环境变量,cmd进入GFPGAN,运行命令。
2023-10-06 22:03:14 337
原创 VisualDL可视化
VisualDL是一个面向深度学习任务设计的可视化工具,包含了scalar、参数分布、模型结构、图像可视化等功能。启动命令,如从外部访问,需添加 host。安装:visualdl。配合模型训练命令使用。
2023-07-19 22:44:07 369
原创 docker Stable Diffusion 模型
总大小18G左右,下载时可能碰到大文件上传错误,查看网络是否正常,尝试换台机器或者服务器,或者使用git fls大文件下载。编写docker-compose。访问服务器ip:port。
2023-07-03 23:42:47 200
原创 mysql使用
进入mysql输入以下命令修改密码(把新的密码修改成你想要的密码)MySQLWorkbench 打不开解决方法。Mysqlworkbench汉化步骤。进入mysql的bin目录。mysql导入数据的方法。登录密码:123456。mysql的基本操作。
2023-07-03 23:33:30 63
原创 sql语句
(更新操作时可能报1175错误,解决办法:降低安全等级)INSERT – 插入数据。SELECT – 查询数据。在指定的列中插入数据。查询表中指定列的数据。
2023-07-03 23:32:43 46
原创 docker 建一个nginx容器,对外提供静态文件服务
想要实现文件浏览,必须要在nginx.conf里的http{}里和default.conf里的server{}里添加autoindex on。想要实现文件浏览,必须要在nginx.conf里的http{}里和default.conf里的server{}里添加autoindex on。挂载主机和nginx的配置文件,修改主机文件,nginx文件也会修改。访问时:http://localhost:80/nginx。访问时:http://localhost:80/nginx。
2023-07-03 23:27:12 150
原创 viscode远程调试
5,1. 在linux修改.ssh目录和authorized_keys权限。vscode全局批量添加引号(其他符合添加同理)6,在viscode中连接远程服务器。1、VSCode下载插件。ctrl+f 文件内搜索。新建config文件。
2023-07-02 23:15:21 116
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人