linzhiji-CSDN博客

参考：python - Cuda 12 + tf-nightly 2.12: Could not find cuda drivers on your machine, GPU will not be used, while every checking is fine and in torch it works - Stack Overflow

2023-09-20 19:48:16 2895

原创 SDXL prompt 笔记

模型有两个，分别是 stable-diffusion-xl-base-1.0、stable-diffusion-xl-refiner-1.0。base 模型是用来做文生图，refiner 模型是用来做图生图的。

2023-09-19 18:53:07 745

原创 FFMpeg zoompan 镜头聚焦和移动走位

原始图片只是改变Z坐标的话，图片将会从左上角开始变化也可以指定x,y,（默认值是0）如果想缩放到图片右边，可以指定 x=iw-iw/zoom，图片的宽-缩放后的宽如果想缩放到图片底部，指定 y=ih-ih/zoomTo zoomout如果想缩小图片，需要初始化图片尺寸，比如。

2023-09-19 12:19:58 1295 1

原创 Python 图像处理库PIL ImageOps笔记

【代码】Python 图像处理库PIL ImageOps笔记。

2023-09-19 11:20:42 229

原创 AI绘图提示词Stable Diffusion Prompt 笔记

生成图片的大小会影响 Prompt 的效果，图片越大需要的 Prompt 越多，不然 Prompt 会相互污染。

2023-09-18 16:42:04 767

原创 ubuntu ffmpeg 合成字幕字体缺失selecting one more font for

【代码】ubuntu ffmpeg 合成字幕字体缺失selecting one more font for。

2023-09-14 20:35:13 651

原创 StableDiffusionXLPipeline cublasCreate(handle) CUBLAS_STATUS_NOT_INITIALIZED

一般是GPU 内存不够。

2023-09-14 19:08:50 218

原创 python diffusers StableDiffusionXLPipeline 离线使用

Diffusers 里代码写死了会访问 huggingface，需要手工改掉。local_files_only是让取本地缓存，这个缓存在当前用户文件夹下。需要自己下载github里的文件，找地方放，然后替换链接。把能翻墙的机器里的缓存，拷贝到不能翻墙的机器里。我这下载后放到项目 models 里。

2023-09-14 18:48:49 2294

原创 HuggingFace 使用 SD SDXL Diffusers Transformers Accelerate 原理

提供不同扩散模型的实现的库，代码上最简洁，国内的问题是 huggingface 需要翻墙。加速库，可以针对不同硬件CPUs, GPUs，TPUs 加快执行模型速度。不可见水印，可以给生成的图片加水印。提供了预训练深度学习模型，

2023-09-13 20:26:34 1033

i input.mp4//这个是原始文件-i image1.png//第一个水印图片-i image2.png//第二个水印图片-y output.mp4//输出文件[1:v]这个里头两个参数，1表示的是操作对象的编号。在本例中0就是原始视频文件input.mp4，1就是image1.png，2就是image2.png，3就是output.mp4。而另一个参数v表示操作对象里的视频信息。[img1]是这个操作过滤器的名字。（当然名字可以随便起）

2023-09-12 21:51:28 2608 3

原创 spacy 中文语义分析下载安装使用

spaCy安装spacy安装模型找到对应的模型，下载，如下图。

2023-09-11 17:09:19 885 1

原创概念：推理训练模型 safetensors ckpt

是通过从已有的数据中学习到某种能力；是简化并使用该能力，使其能快速、高效地对未知的数据进行操作，以获得预期的结果。

2023-09-08 15:47:06 2104

原创 Accelerate 多机多卡训练

参考：

2023-09-08 15:07:18 437

原创 Pytorch 分布式训练（DP/DDP）

PyTorch是非常流行的深度学习框架，它在主流框架中对于灵活性和易用性的平衡最好。分布式训练根据并行策略的不同，可以分为模型并行和数据并行。

2023-09-08 15:04:16 425

原创 mac m1 代码调用 huggingface Stable Diffusion(diffusers 方式)Stable Diffusion xl

Hugging Face 平台提供了基础模型权重以及通用的模型训练框架 diffusers。

2023-09-07 17:47:43 426

原创 ONNX OpenVino TensorRT MediaPipe NCNN Diffusers ComfyUI

在训练模型时可以使用很多不同的框架，比如 Pytorch， TensorFLow， MXNet，以及深度学习最开始流行的 Caffe 等等，这样不同的训练框架就导致了产生不同的模型结果包，在模型进行部署推理时就需要不同的依赖库，而且同一个框架比如 tensorflow 不同的版本之间的差异较大。和Java生成的中间文件可以在JVM上运行一样，AI技术在具体落地应用方面，和其他软件技术一样，也需要具体的部署和实施的。既然要做部署，那就会有不同平台设备上的各种不同的部署方法和相关的部署架构工具。

2023-09-07 15:46:37 617

原创 huggingface 使用入门笔记

Hugging Face Hub和 Github 类似，都是Hub(社区)。Hugging Face可以说的上是机器学习界的Github。：Git仓库可以让你管理代码版本、开源代码。而模型仓库可以让你管理模型版本、开源模型等。使用方式与Github类似。：Hugging Face为不同的机器学习任务提供了许多预训练好的机器学习模型供大家使用，这些模型就存储在模型仓库中。：Hugging Face上有许多公开数据集。

2023-09-06 19:06:36 704

原创照片图片动漫化卡通化

效果这2个模型要求，python版本不能太高，否则无法安装 tensorflow 1.15.0 版本。

2023-09-06 17:08:48 357

原创文字转语音TTS bark SpeechT5 mms

GitHub - suno-ai/bark: 🔊 Text-Prompted Generative Audio Modelhttps://github.com/microsoft/SpeechT5使用 SpeechT5 进行语音合成、识别和更多功能 - 掘金Facebook mmshttps://github.com/facebookresearch/fairseq/tree/main/examples/mms#asrfacebook/mms-tts · Hugging Face

2023-09-06 16:55:37 505