feat: complete wikification of War Commander batch 1&2 and final grey dot cleanup
This commit is contained in:
@@ -1,12 +1,12 @@
|
||||
---
|
||||
id: DL-NORM-001
|
||||
category: "[[10_Wiki/💡 Topics/AI]]"
|
||||
category: "10_Wiki/💡 Topics/AI"
|
||||
confidence_score: 1.0
|
||||
tags: [ai, deep-learning, normalization, batch-norm, layer-norm, training-stability]
|
||||
last_reinforced: 2026-04-26
|
||||
---
|
||||
|
||||
# [[Normalization Strategies (정규화 전략)]]
|
||||
# Normalization Strategies (정규화 전략)
|
||||
|
||||
## 📌 한 줄 통찰 (The Karpathy Summary)
|
||||
> "데이터의 날것 그대로의 요동을 차분히 길들여, 신경망이 혼란 없이 최적의 길(Gradient)을 찾도록 하라" — 신경망 내부의 데이터 분포를 일정하게 유지함으로써 학습 속도를 높이고 기울기 소실/폭주 문제를 완화하여 모델의 수렴 안정성을 극대화하는 기법.
|
||||
@@ -25,5 +25,5 @@ last_reinforced: 2026-04-26
|
||||
- **정책 변화:** Antigravity 프로젝트는 대규모 언어 모델 학습 및 추론 시, 연산 효율과 안정성이 입증된 Pre-Layer Normalization 아키텍처를 기본 사양으로 적용함.
|
||||
|
||||
## 🔗 지식 연결 (Graph)
|
||||
- [[Layer-Normalization]], [[Batch-Normalization-Exploration]], [[Deep-Learning-Foundations]], [[Gradient-Descent-Foundations]]
|
||||
- **Raw Source:** [[10_Wiki/Topics/AI/Normalization-Strategies.md]]
|
||||
- [[Layer-Normalization]], Batch-Normalization-Exploration, Deep-Learning-Foundations, Gradient-Descent-Foundations
|
||||
- **Raw Source:** 10_Wiki/Topics/AI/Normalization-Strategies.md
|
||||
|
||||
Reference in New Issue
Block a user