Files
2nd/10_Wiki/Topics/Domain_Design/Topic_Prompt/Diffusion Models.md
T
Antigravity Agent c24165b8bc refactor(topics): 멀티 에이전트용 지식 재편 — _Common(공통 기본기) + Domain_* 구조
에이전트 8종(대화형/프로그래머 C·S/디자이너/설계자/기획자/QA/PD/PM)에게
[공통 기본 능력 + 롤별 Specialty] 2층으로 지식을 주입하기 위한 재분류.
문서 내용·포맷은 무수정, 폴더 이동만 (6,372개 문서 수 보존 확인).

- Topic_Programming → Domain_Programming (내부 구조 보존)
- Topic_Graphic → Domain_Design
- Topic_Business → Domain_Product
- Topic_General → Domain_General
- _Common 신설: Math(구 Topic_Math_Specialty), Reasoning(구 General/From_Thinking & Reasoning),
  Reasoning_Creativity(구 General/From_창의성), Communication(Poetic_Blog_Writing + From_writing)
- 타 도메인의 From_* 폴더는 유지 (출처 표기일 뿐, 이미 도메인에 맞게 분류된 문서)
- 빈 폴더 정리 (memory/procedures)
- 에이전트→폴더 매핑은 workspace의 .astra/agent-knowledge-map.json (9개 에이전트)

Co-Authored-By: Claude Fable 5 <noreply@anthropic.com>
2026-07-11 11:05:56 +09:00

10 KiB
Raw Blame History

id, title, category, status, verification_status, canonical_id, aliases, duplicate_of, source_trust_level, confidence_score, created_at, updated_at, review_reason, merge_history, tags, raw_sources, applied_in, github_commit
id title category status verification_status canonical_id aliases duplicate_of source_trust_level confidence_score created_at updated_at review_reason merge_history tags raw_sources applied_in github_commit
diffusion-models Diffusion Models AI_and_ML draft conceptual
확산 모델
디퓨전 모델
Latent Diffusion
Reverse Diffusion
Denoising Process
생성형 확산 모델
A 0.90 2026-06-26 2026-06-26
research
image Prompt 작성 방법
Diffusion Models
Stable Diffusion
AI Architecture
AI 이미지 프롬프트 엔지니어링의 이론적 기초와 모델별 최적화 실무 방법론
Flux vs Stable Diffusion vs Midjourney: Best AI Image Generator Comparison - Artsmart.ai
Midjourney vs Stable Diffusion vs Flux: Which Wins? (2025) - PXZ AI
Stable Diffusion Negative Prompt: Optimize Your AI Art - AI Photo Generator
Stable Diffusion Negative Prompts: The Ultimate Collection
How to Use Negative Prompts in Stable Diffusion (2025) - QWE AI Academy
AI for Images: Midjourney, DALL-E, Stable Diffusion, Firefly Complete Guide
E-commerce_Image_Batch_Automation
Furniture_Product_Catalog_Generation
ComfyUI_Node_Based_Workflows

Diffusion Models

🎯 한 줄 통찰 (One-line insight)

디퓨전 모델은 무작위 노이즈 상태에서 의미론적 가이던스(프롬프트)를 통해 단계적으로 데이터를 복원하여 수학적 확률 공간 내에서 시각적 실체를 조각해내는 역확산 알고리즘 체계이다 [S432, S803].

🧠 핵심 개념 (Core concepts)

  • 반복적 디노이징 (Iterative Denoising): 훈련 데이터에 노이즈를 추가하는 확산 과정을 학습하고, 이를 역으로 수행하여 순수 노이즈에서 이미지를 생성하는 핵심 메커니즘 [S432, S803].
  • 잠재 확산 모델 (Latent Diffusion Model): 고해상도 픽셀 공간 대신 압축된 잠재 공간(Latent Space)에서 연산을 수행하여 계산 효율성을 극대화한 방식 (대표적으로 Stable Diffusion) [S432, S433].
  • 역확산 가이던스 (Reverse Diffusion Guidance): 텍스트 인코더가 생성한 벡터를 통해 노이즈 제거 방향을 결정함으로써 사용자의 의도를 시각화하는 과정 [S39, S1104, S1177].
  • 분류기 없는 가이던스 (Classifier-Free Guidance, CFG): 조건부 노이즈 예측과 무조건적 노이즈 예측 사이의 가중치를 조절하여 프롬프트 준수 강도를 수치적으로 통제하는 기법 [S46, S652, S1106].

🧩 추출된 패턴 (Extracted patterns)

  • 조각가 패턴 (Sculptor Pattern): 노이즈라는 거대한 대리석 블록에서 프롬프트라는 치슬(Chisel)을 사용해 불필요한 영역을 깎아내며 형태를 드러내는 설계 철학 [S803, S1176].
  • 임계 지연 영향 (Critical Lag Influence): 네거티브 프롬프트의 영향력이 생성 초기보다 **10단계 이후(Step 10+)**에 본격적으로 발휘되어 구조적 결함을 수정하는 시간적 패턴 [S1124].
  • 장력 균형 패턴 (Tension Balance): 긍정 임베딩과 부정 임베딩을 동일한 토큰 크기(예: 77토큰)로 수용하여 노이즈 예측 모듈 내에서 팽팽한 장력 균형을 유도하는 물리적 배치 [S46].

⚖️ 비교 및 선택 기준 (Comparison & decision criteria)

아키텍처 (Generation) 기술적 특성 주요 모델 예시 선택 기준
Pixel-based 픽셀 단위 직접 연산, 높은 하드웨어 사양 DALL-E 2 (초기) [S568] 정밀한 픽셀 제어가 필요할 때
Latent-based 압축 공간 연산, 고속 및 저사양 유리 Stable Diffusion 1.5 / XL [S432, S433] 오픈소스 기반 커스터마이징 필요 시
Transformer-based MMDiT, T5 인코더 결합으로 문맥 이해 극대화 Flux.1, Stable Diffusion 3 [S46, S49] 복잡한 자연어 및 텍스트 구현 중시 시

📖 세부 내용 (Details)

1. 물리적 작동 원리: 확산과 역확산

  • 순방향 확산: 원본 이미지에 미세한 가우시안 노이즈를 점진적으로 추가하여 완전한 노이즈 상태로 만드는 과정 [S432, S1177].
  • 역방향 확산 (생성): 인공지능이 노이즈 예측 모듈(U-Net 또는 Transformer)을 가동하여 현재 단계의 노이즈에서 '제거해야 할 노이즈'를 추론하고, 이를 반복 차감하여 형태를 구축함 [S44, S46, S803].

2. 가이던스(Conditioning)의 개입

  • 모델은 단순히 이미지를 만드는 것이 아니라, 입력된 프롬프트 벡터와 현재 노이즈 사이의 유사도를 계산하여 다음 스텝의 픽셀 배치 확률을 업데이트함 [S39, S1106].
  • 네거티브 프롬프트는 역확산 과정에서 특정 레이아웃 영역으로 이미지가 발산하지 않도록 밀어내는 가상의 반발 가드레일 역할을 수행함 [S45, S1107].

3. 모델 버전별 진화 양상 [S46]

  • SD 1.5: 해부학적 데이터가 한정적이어 대량의 네거티브 어휘(5-15개)를 통한 중량급 교정이 필수적임.
  • SDXL: 듀얼 텍스트 인코더를 탑재하여 긴 네거티브 나열 시 오히려 묘사력 감퇴가 발생함 (2-5개 권장).
  • SD 3 / Flux: MMDiT(Multi-Modal Diffusion Transformer) 구조를 채택하여 텍스트와 이미지의 결합 성능이 비약적으로 향상됨.

⚖️ 모순 및 업데이트 (Contradictions & updates)

  • 네거티브 프롬프트의 실효성 논란: 과거에는 모든 결함을 네거티브 프롬프트로 해결하려 했으나, 최신 연구(ECCV 2024 등) 및 커뮤니티 테스트에 따르면 모델이 학습하지 못한 개념(완벽한 손가락 등)은 네거티브로 강제할 수 없으며, 이는 훈련 데이터의 한계임 [S645, S654, S1124].
  • Flux의 가이던스 강제: 최신 Flux 모델은 기존의 CFG 스케일 대신 신경망 내부에 가이던스 메커니즘을 내재화하여 수치를 1로 고정하거나 별도의 매개변수로 우회 조절함 [S46].

🛠️ 적용 사례 (Applied in summary)

  • 가구 제품 카탈로그 자동화: 가구 클라이언트 프로젝트에서 Midjourney로 초기 시안을 잡고, Stable Diffusion의 역확산 제어 기술을 사용하여 50개 이상의 제품 변체를 동일한 조명과 배경 하에 생성함 [S5, S11].
  • ComfyUI 기반 워크플로우: Python 3.10 환경에서 노드 기반 인터페이스를 통해 역확산 과정을 단계별로 시각화하고 대량의 이미지를 배치 처리하는 자동화 시스템 구축 [S6, S25].

💻 코드 패턴 (Code patterns)

소스 내에 직접적인 확산 알고리즘 코드는 없으나, 모델 가동을 위한 Python 실행 패턴이 기술됨.

# ComfyUI 기반 로컬 모델 가동 패턴
# 환경: Python 3.10, NVIDIA GPU (6GB+ VRAM)
git clone https://github.com/comfyanonymous/ComfyUI.git
pip install -r requirements.txt
python main.py
# 이후 Checkpoint(Latent Diffusion Weights)를 로드하여 노드 워크플로우 실행
``` [S6]

## ✅ 검증 상태 및 신뢰도
- **상태:** draft
- **검증 단계:** conceptual (물리적 메커니즘과 모델별 아키텍처 분석 포함)
- **출처 신뢰도:** A (공식 기술 문서 및 ECCV 학술 연구 데이터 인용)
- **신뢰 점수:** 0.90
- **중복 검사 결과:** 신규 생성 (New discovery)

## 🔗 관련 문서 링크 (Related document links)

### 상위/유사 개념
- [[image Prompt 작성 방법]] — 확산 모델을 제어하기 위한 최상위 지시 체계
- [[Prompt Engineering]] — 확산 모델의 벡터 전이를 최적화하는 기술
- [[Negative Prompt]] — 역확산 과정에서의 반발 가이던스 상세 제어법

### 심층 후속 질문 (Deeper Research Questions)
- 잠재 공간의 압축률(VAE 성능)이 확산 모델의 세부 질감 복원력에 미치는 수학적 영향은? [S432, S1127]
- Transformer 아키텍처 기반의 확산 모델이 기존 U-Net 대비 자연어 순응도가 높은 물리적 이유는? [S46, S110]
- 디퓨전 단계별 스케줄러(Sampler) 변경이 프롬프트 가중치 해석의 정밀도를 어떻게 변화시키는가? [S1127]

### 실무 적용 맥락 (Practical Application Contexts)
- **Implementation:** 고해상도 상업용 이미지 생성 파이프라인 설계 [S6, S15].
- **System Design:** 로컬 하드웨어 사양에 따른 적정 확산 모델(SD 1.5 vs XL vs Flux) 선택 [S6, S46].
- **Operation / Maintenance:** 모델 버전 업그레이드에 따른 가이던스 스케일(CFG) 마이그레이션 [S46, S730].

### 인접 주변 주제
- [[Multimodal AI]] — 텍스트와 이미지의 확률 밀도 결합 확장 방향.
- [[ControlNet]] — 확산 과정에 기하학적 제약 조건을 부여하는 추가 신경망 기술 [S7, S433].

## 🔗 지식 그래프 (Knowledge Graph)
- **상위/루트:** [[image Prompt 작성 방법]]
- **관련 개념:** [[Latent Diffusion]], [[Reverse Diffusion]], [[CFG Scale]], [[Denoising Step]]
- **참조 맥락:** 인공지능 이미지 생성의 물리적 원리 이해 및 아키텍처별 프롬프트 최적화 시 참조.

## 📚 출처 (Sources)
- [S39] AI 이미지 프롬프트 엔지니어링 이론 기초와 공통 프레임워크
- [S44] 스테이블 디퓨전 가중치 조절 수식 및 역확산 연산
- [S45] 프롬프트 스케줄링 및 네거티브 반발 가드레일 원리
- [S46] 아키텍처 버전별 특성 비교 및 CFG 가이던스 통제 기준
- [S432] Diffusion Models 및 Latent Diffusion 정의 (Artsmart.ai)
- [S568] DALL-E 2의 CLIP 결합형 확산 모델 진화 (DataCamp)
- [S803] 역확산 과정과 조각가 비유 (PXZ AI)
- [S1104] 네거티브 프롬프트의 세부 가이던스 메커니즘
- [S1124] ECCV 2024: 네거티브 프롬프트의 시간적 지연 효과 분석
- [S1177] 확산(Diffusion)의 물리적 노이즈 주입 및 제거 정의

## 📝 변경 이력 (Change history)
- 2026-06-26: Initial draft generated via Datacollector_MAC P-Reinforce engine. 확산 모델의 물리적 메커니즘과 모델별 비교 데이터 합성 완료.