image_generation_using_stable_diffusion
第1部分:稳定的扩散
- 安装库(Xformers库以进行内存优化)
- 图像生成的管道:创建提示 - >生成图像 - >保存结果
- 生成多个图像
- 参数:种子,推理步骤,引导量表(CFG),图像大小(尺寸),负提示
- 其他型号:SD V1.5,SD V2.X,具有特定样式的微调模型
- 更改调度程序:PNDM(默认),DDIM调度程序,K-LMS调度程序,Euler祖先离散调度程序(Euler A),DPM调度程序
第2部分:及时工程
- 探索提示:主题 /对象,动作和位置,类型,样式,颜色,艺术家,分辨率,网站。和其他属性:iLumination,负面提示
- 用例:生成艺术,生成照片,生成景观,生成3D图像,生成图纸,生成架构
- 使用自定义模型改进结果:任何内容(CAG/nothing-v3-1),dreamshaper(lykon/dreamshaper),现实视觉(sg161222/realistic_vision_vision_v1.4),类似物扩散(wavymulder/agalog-diffusion),protogen(protogen),darkstorm2150/frotogen_x3.4__x3.4____fire ease,difffusion) (Mitsua/Mitsua-diffusion-)
第3部分:微调
- 安装库(加速变压器FTFY BITSANDBYTES == 0.35.0 Gradio Natsort Safetensors Xformers)
- 加载模型
- 培训:需要三个组件:唯一标识符,班级名称,图像
- 将权重转换为(检查点)
- 推理(测试)
- 生成图像:测试多个提示,更多及时的例子:在开罗的森林中,开罗沙漠,西方现场,在星球大战,富士山,雪地里,在雪地里等等。
- 保存结果
第4部分:图像到图像
- 安装库(加速变压器FTFY BITSANDBYTES == 0.35.0 Gradio Natsort Safetensors Xformers)
- 生成图像
- 强度参数(强度)
- 测试不同的样式
- 更改输入图像
- 更改调度程序
- 图像到图像“编辑”(consendpix2pix)
第5部分:注入
- 安装库(加速变压器FTFY BITSANDBYTES == 0.35.0 Gradio Natsort Safetensors Xformers)
- 创建提示
- 交换对象
- 比较结果(其他图像,生成多个图像)
第6部分:控制网
- 安装库(加速变压器Xformers)
- 使用边缘生成图像(ControlNet模型 + Canny Edge,使用Canny Edge检测边缘,微型模型)
- 使用姿势生成图像