--- id: ML-LDA-001 category: "10_Wiki/πŸ’‘ Topics/AI" confidence_score: 1.0 tags: [machine-learning, lda, dimensionality-reduction, classification, statistics] last_reinforced: 2026-04-26 --- # Linear Discriminant Analysis (LDA, μ„ ν˜• νŒλ³„ 뢄석) ## πŸ“Œ ν•œ 쀄 톡찰 (The Karpathy Summary) > "집단 λ‚΄λΆ€μ˜ 결속은 λ‹€μ§€κ³ , 집단 μ‚¬μ΄μ˜ κ±°λ¦¬λŠ” 벌렀 μ„Έμƒμ˜ 경계λ₯Ό κ°€μž₯ μ„ λͺ…ν•˜κ²Œ νˆ¬μ˜ν•˜λΌ" β€” 클래슀 κ°„ λΆ„μ‚°(Between-class variance)κ³Ό 클래슀 λ‚΄ λΆ„μ‚°(Within-class variance)의 λΉ„μœ¨μ„ μ΅œλŒ€ν™”ν•˜μ—¬, 데이터λ₯Ό κ°€μž₯ 잘 λΆ„λ₯˜ν•  수 μžˆλŠ” 저차원 κ³΅κ°„μœΌλ‘œ νˆ¬μ˜ν•˜λŠ” 지도 ν•™μŠ΅ 기반 차원 μΆ•μ†Œ 기법. ## πŸ“– κ΅¬μ‘°ν™”λœ 지식 (Synthesized Content) - **μΆ”μΆœλœ νŒ¨ν„΄:** "Separability Maximization" β€” μ •λ‹΅ λ ˆμ΄λΈ”(Label) 정보λ₯Ό ν™œμš©ν•˜μ—¬, μ„œλ‘œ λ‹€λ₯Έ ν΄λž˜μŠ€κ°€ κ²ΉμΉ˜μ§€ μ•Šκ³  κ°€μž₯ λšœλ ·ν•˜κ²Œ κ΅¬λΆ„λ˜λŠ” 졜적의 투영 좕을 μ°Ύμ•„λ‚΄λŠ” λΆ„λ₯˜ μ§€ν–₯적 νŠΉμ§• μΆ”μΆœ νŒ¨ν„΄. - **PCAμ™€μ˜ 차이점:** - **PCA:** 데이터 μ „μ²΄μ˜ 뢄산이 큰 좕을 찾음 (비지도 ν•™μŠ΅). 정보 손싀 μ΅œμ†Œν™” 쀑심. - **LDA:** 클래슀 κ°„ ꡬ뢄이 잘 λ˜λŠ” 좕을 찾음 (지도 ν•™μŠ΅). λΆ„λ₯˜ μ„±λŠ₯ κ·ΉλŒ€ν™” 쀑심. - **의의:** μ–Όκ΅΄ 인식, λ§ˆμΌ€νŒ… νƒ€κ²Ÿ λΆ„λ₯˜ λ“± νŠΉμ§• 데이터가 많고 ν΄λž˜μŠ€κ°€ λͺ…ν™•ν•œ ν™˜κ²½μ—μ„œ μ—°μ‚° 효율과 λΆ„λ₯˜ 정확도λ₯Ό λ™μ‹œμ— μž‘λŠ” κ°•λ ₯ν•œ 도ꡬ. ## ⚠️ λͺ¨μˆœ 및 μ—…λ°μ΄νŠΈ (Contradictions & RL Update) - **κ³Όκ±° λ°μ΄ν„°μ™€μ˜ 좩돌:** 데이터가 μ •κ·œ 뢄포λ₯Ό λ”°λ₯΄κ³  곡뢄산 ꡬ쑰가 κ°™μ•„μ•Ό ν•œλ‹€λŠ” μ—„κ²©ν•œ 가정이 μžˆμœΌλ‚˜, μ‹€μ œ λ³΅μž‘ν•œ λ°μ΄ν„°μ—μ„œλŠ” λΉ„μ„ ν˜•μ  ν•œκ³„λ₯Ό κ·Ήλ³΅ν•˜κΈ° μœ„ν•΄ 컀널 LDA λ“±μœΌλ‘œ ν™•μž₯λ˜μ–΄ μ‚¬μš©λ¨. - **μ •μ±… λ³€ν™”:** Antigravity ν”„λ‘œμ νŠΈλŠ” μ—μ΄μ „νŠΈμ˜ 행동 λ‘œκ·Έμ—μ„œ νŠΉμ • 'μ‚¬μš©μž μ˜λ„'λ₯Ό νŒ¨ν„΄λ³„λ‘œ λΆ„λ₯˜ν•˜μ—¬ μ‹œκ°ν™”ν•  λ•Œ, μ˜λ„ κ°„ 차이λ₯Ό κ°€μž₯ 잘 λ³΄μ—¬μ£ΌλŠ” LDA 투영 기법을 ν™œμš©ν•¨. ## πŸ”— 지식 μ—°κ²° (Graph) - [[Dimensionality-Reduction]], [[Supervised-Learning-Foundations]], [[Exploratory-Data-Analysis]], Pattern-Recognition-Foundations - **Raw Source:** 10_Wiki/Topics/AI/Linear-Discriminant-Analysis.md