推荐：Native Diffusion Swift 包 - 在本地优雅地运行稳定扩散模型

推荐：Native Diffusion Swift 包 - 在本地优雅地运行稳定扩散模型

native-diffusionNative Stable Diffusion inference on iOS / macOS using MPSGraph项目地址:https://gitcode.com/gh_mirrors/na/native-diffusion

探索先进的图像生成技术，无需Python环境！

Native Diffusion 是一个基于Swift的开源库，它让你能在macOS和iOS设备上本地运行稳定扩散（Stable Diffusion）模型。这个项目是Maple Diffusion的Swift包管理器版本，提供了简洁的API以及与Combine和async/await集成的便利功能。

项目介绍

Native Diffusion 集成了 Metal Performance Shader Graph 管道，允许在Swift中直接处理图像生成任务。它的特色在于可以将模型权重从任何本地或远程URL下载到应用本身，简化了用户端的使用流程。此外，该库还支持Dreambooth模型，让个性化图像生成变得简单。

技术分析

• Swift + MPSGraph：利用Apple的MPSGraph框架，可以在不依赖Python或TensorFlow的情况下实现高效计算。
• 灵活API：提供多种参数选项，如提示语、引导比例、步骤数、种子值和输入图像，以满足不同需求。
• 优化性能：特别设计用于SwiftUI，但同样适用于其他项目类型，如命令行、UIKit或AppKit。

应用场景

• 快速原型开发：对于开发者来说，这是一个快速构建图像生成应用的理想起点。
• 用户体验提升：由于模型完全本地化，用户无需额外安装任何软件就能体验高质量的生成效果。
• 移动设备应用：对于iOS开发者，能够在移动设备上运行复杂的图像生成模型是一个巨大的创新。

项目特点

1. 极简API：一行代码即可生成图像。
2. 一键转换：提供将标准CKPT文件转换为Native Diffusion内存优化格式的工具。
3. 多平台支持：适应macOS和iOS，且内置模型下载功能。
4. 商业友好：代码MIT许可，图片生成遵循CreativeML Open RAIL-M许可证，适合商业用途。

使用示例

以下是一段简单的SwiftUI代码片段，展示如何在应用中生成图像：

@StateObject var sd = Diffusion()
...
try? await Diffusion.generate(localOrRemote: modelUrl, prompt: "猫宇航员")

为了深入了解，查看示例项目如SimpleDiffusion和SingleLineDiffusion，它们提供了完整的应用实例。

安装与准备

通过Xcode的Swift包管理器轻松添加Native Diffusion到你的项目，并使用提供的脚本将模型权重转化为适用于Swift的格式。

现在，是时候挖掘Native Diffusion的潜力，为你的应用带来创新性的图像生成体验了。无论你是新手还是经验丰富的开发者，这个开源项目都值得尝试！

了解更多详情，请访问项目GitHub仓库：https://github.com/mortenjust/native-diffusion

native-diffusionNative Stable Diffusion inference on iOS / macOS using MPSGraph项目地址:https://gitcode.com/gh_mirrors/na/native-diffusion