[G1-Sync] Manual knowledge update

This commit is contained in:
Antigravity Agent
2026-04-30 22:42:02 +09:00
parent 0bd4f19e38
commit c36c0644a1
4888 changed files with 18470 additions and 18602 deletions
+3 -3
View File
@@ -2,7 +2,7 @@
id: OPT-GRAD-001
category: "10_Wiki/💡 Topics/AI"
confidence_score: 1.0
tags: [ai, optimization, mathematics, gradient-descent, machine-learning]
tags: [ai, [[Optimization]], mathematics, gradient-descent, machine-learning]
last_reinforced: 2026-04-26
---
@@ -18,7 +18,7 @@ last_reinforced: 2026-04-26
- **Partial Derivative:** 각 파라미터가 오차에 미치는 영향력을 개별적으로 계산.
- **Step:** 현재 위치에서 기울기가 가장 가파른 방향의 반대로 이동하는 한 단계의 연산.
- **주요 변형:**
- **Stochastic Gradient Descent (SGD):** 하나의 데이터만 보고 즉시 업데이트. 빠르지만 요동이 심함.
- **[[stochastic gradient descent]] (SGD):** 하나의 데이터만 보고 즉시 업데이트. 빠르지만 요동이 심함.
- **Mini-batch SGD:** 적절한 묶음 데이터를 사용하여 속도와 안정성의 균형을 맞춤. 현대 딥러닝의 표준.
- **의의:** 복잡한 신경망의 수백만 개 파라미터를 학습시킬 수 있는 유일하고 실질적인 방법.
@@ -27,5 +27,5 @@ last_reinforced: 2026-04-26
- [[Global-vs-Local-Optima]] 문서와 연계하여, 지역 최적해의 함정을 피하는 것이 경사 하강법 운영의 핵심 기술임.
## 🔗 지식 연결 (Graph)
- [[Backpropagation]], [[Global-vs-Local-Optima]], Deep-Learning-Foundations, Mathematics-for-AI
- [[Backpropagation]], [[Global-vs-Local-Optima]], [[Deep-Learning]]-Foundations, Mathematics-for-AI
- **Raw Source:** 10_Wiki/Topics/AI/Gradient-Descent.md