29 lines
2.3 KiB
Markdown
29 lines
2.3 KiB
Markdown
---
|
|
id: DL-PY-LIGHT-001
|
|
category: "10_Wiki/💡 Topics/AI"
|
|
confidence_score: 1.0
|
|
tags: [ai, deep-learning, pytorch, pytorch-lightning, scalability, boilerplate-reduction, mlops]
|
|
last_reinforced: 2026-04-26
|
|
---
|
|
|
|
# PyTorch Lightning (PyTorch 라이트닝)
|
|
|
|
## 📌 한 줄 통찰 (The Karpathy Summary)
|
|
> "반복되는 엔지니어링의 노이즈를 걷어내고, 오직 지능의 '핵심 로직(Research)'에만 집중할 수 있는 표준화된 고속도로를 구축하라" — PyTorch의 유연성을 유지하면서 학습 루프, 하드웨어 설정 등 반복적인 코드를 자동화하여 생산성과 가독성을 극대화하는 경량 래퍼(Wrapper) 프레임워크.
|
|
|
|
## 📖 구조화된 지식 (Synthesized Content)
|
|
- **추출된 패턴:** "Separation of Concerns and Standardized Training Interface" — 모델의 구조(Model), 데이터 처리(Data), 학습 환경(Trainer)을 명확히 분리하여, 코드 한 줄 변경만으로 CPU에서 멀티 GPU나 TPU로 학습 환경을 즉시 전환할 수 있게 만드는 패턴.
|
|
- **핵심 구성 요소:**
|
|
- **LightningModule:** 모델 구조, 옵티마이저, 학습/검증 단계를 하나로 캡슐화.
|
|
- **Trainer:** 학습 루프 제어, 체크포인트 저장, 로그 관리 자동화.
|
|
- **DataModule:** 데이터셋 로드 및 전처리 로직의 재사용성 확보.
|
|
- **의의:** 복잡한 딥러닝 실험의 재현성(Reproducibility)을 높이고, 팀 단위 협업 시 코드의 일관성을 유지하며, MLOps로의 전환을 용이하게 함.
|
|
|
|
## ⚠️ 모순 및 업데이트 (Contradictions & RL Update)
|
|
- **과거 데이터와의 충돌:** 프레임워크가 무거워지면 제어권이 사라질 것이라는 우려를 '훅(Hook)' 기반의 유연한 오버라이딩 설계로 극복하며, 이제는 대규모 언어 모델 학습과 엔터프라이즈급 AI 개발의 필수 도구로 자리 잡음.
|
|
- **정책 변화:** Antigravity 프로젝트는 대규모 모델의 분산 학습 및 성능 벤치마킹 시, 코드 유지보수 효율을 위해 PyTorch Lightning 기반의 프로젝트 구조를 권장함.
|
|
|
|
## 🔗 지식 연결 (Graph)
|
|
- [[PyTorch-Foundations]], Deep-Learning-Foundations, System-Design-for-AI-Scale, GPU-Optimization-Foundations
|
|
- **Raw Source:** 10_Wiki/Topics/AI/PyTorch-Lightning.md
|