图生图功能:
1、图生图,就是文生图加张参考图;
2、绘图,就是图生图加上手绘;
3、局部重绘,就是只画图生图中的一部分功能;
4、局部重绘(手涂蒙版),就是图生图的一部分功能加上绘图;
5、上传蒙版,就是局部重绘加上PS的蒙版处理,规定边界;
6、批量处理,就是多张图一起用局部重绘,就可以节省时间。
ControlNet 是一种神经网络结构,通过添加额外条件来控制扩散模型。
它将神经网络块的权重复制到“锁定”副本和“可训练”副本中。
“可训练”的人会了解您的病情。“锁定”的模型将保留您的模型。
因此,使用图像对的小数据集进行训练不会破坏生产就绪的扩散模型。
“零卷积”是 1×1 卷积,权重和偏差都初始化为零。
在训练之前,所有零卷积都输出零,ControlNet 不会造成任何失真。
没有一个层是从头开始训练的。你还在微调。您的原始模型是安全的。
这允许在小规模甚至个人设备上进行培训。
这对于合并/替换/抵消模型/权重/块/层也很友好