image_generation_using_stable_diffusion
1 부 : 안정적인 확산
- 라이브러리 설치 (Xformers 라이브러리에서 메모리 최적화로)
- 이미지 생성을위한 파이프 라인 : 프롬프트 생성 -> 이미지 생성 -> 결과 저장
- 여러 이미지 생성
- 매개 변수 : 종자, 추론 단계, 안내 척도 (CFG), 이미지 크기 (치수), 음수 프롬프트
- 기타 모델 : SD v1.5, SD v2.x, 특정 스타일의 미세 조정 모델
- 스케줄러 변경 : PNDM (기본값), DDIM 스케줄러, K-LMS 스케줄러, Euler Ancestral Discrete Scheduler (Euler A), DPM 스케줄러
2 부 : 프롬프트 엔지니어링
- 프롬프트 탐색 : 주제 / 객체, 행동 및 위치, 유형, 스타일, 색상, 아티스트, 해상도, 사이트. 그리고 다른 속성 : 일루미네이션, 부정적인 프롬프트
- 사용 사례 : 예술 생성, 사진 생성, 풍경 생성, 3D 이미지 생성, 도면 생성, 아키텍처 생성
- 사용자 정의 모델을 사용하여 결과 개선 : 무엇이든 (CAG/aly-V3-1), Dreamshaper (Lykon/Dreamshaper), 현실적인 비전 (SG161222/realistic_vision_v1.4), 아날로그 확산 (wavymulder/analog-diffusion), protenge (darkstorm2150/protogen_x3.4_official_official_official_official_official_) (Mitsua/Mitsua-Diffusion-One)
3 부 : 미세 조정
- 라이브러리 설치 (트랜스포머 가속기 ftfy bitsandbytes == 0.35.0 Gradio Natsort Safetensors Xformers)
- 모델로드
- 교육 : 세 가지 구성 요소가 필요합니다 : 고유 식별자, 클래스 이름, 이미지
- 가중치를 (체크 포인트)로 변환
- 추론 (테스트)
- 이미지 생성 : 여러 프롬프트 테스트,보다 신속한 예 : 숲, 카이로, 카이로 사막, 서부 장면, 스타 워즈, 후지 산, 눈 등
- 결과 저장
4 부 : 이미지 대 이미지
- 라이브러리 설치 (트랜스포머 가속기 ftfy bitsandbytes == 0.35.0 Gradio Natsort Safetensors Xformers)
- 이미지 생성
- 강도 매개 변수 (강도)
- 다른 스타일을 테스트합니다
- 입력 이미지 변경
- 스케줄러 변경
- 이미지 대 이미지 "편집"(InstructPix2Pix)
5 부 : 인파 팅
- 라이브러리 설치 (트랜스포머 가속기 ftfy bitsandbytes == 0.35.0 Gradio Natsort Safetensors Xformers)
- 프롬프트 생성
- 개체 교환
- 결과 비교 (기타 이미지, 여러 이미지 생성)
6 부 : Controlnet
- 라이브러리 설치 (변압기 Xformers Accelerate)
- 가장자리를 사용하여 이미지 생성 (Controlnet Model + Canny Edge, Canny Edge, 미세 조정 모델을 사용하여 가장자리 감지)
- 포즈를 사용하여 이미지 생성