30 lines
2.3 KiB
Markdown
30 lines
2.3 KiB
Markdown
---
|
|
id: DL-PYTORCH-001
|
|
category: "10_Wiki/💡 Topics/AI"
|
|
confidence_score: 1.0
|
|
tags: [ai, deep-learning, pytorch, tensors, autograd, framework, python]
|
|
last_reinforced: 2026-04-26
|
|
---
|
|
|
|
# PyTorch Foundations (PyTorch 기초)
|
|
|
|
## 📌 한 줄 통찰 (The Karpathy Summary)
|
|
> "데이터를 유연한 텐서의 흐름(Tensors)으로 정의하고, 수학적 기울기를 자동으로 추적(Autograd)하여, 파이썬다운 우아함으로 지능의 아키텍처를 구현하라" — 페이스북(현 Meta)에서 개발한 오픈소스 머신러닝 라이브러리로, 동적 계산 그래프와 파이썬 지향적 설계로 현대 딥러닝 연구 및 실무의 표준이 된 프레임워크.
|
|
|
|
## 📖 구조화된 지식 (Synthesized Content)
|
|
- **추출된 패턴:** "Tensor Operations and Automatic Differentiation" — 다차원 배열 연산을 GPU 가속을 통해 고속으로 처리하고, 복잡한 신경망 연산 과정에서의 미분값을 역전파(Backpropagation) 시점에 자동으로 계산해주는 핵심 패턴.
|
|
- **주요 구성 요소:**
|
|
- **Tensors:** GPU 가속이 가능한 다차원 배열. PyTorch의 기본 데이터 단위.
|
|
- **Autograd:** 미분값 계산을 자동화하는 엔진.
|
|
- **nn.Module:** 레이어와 모델 아키텍처를 정의하는 기본 클래스.
|
|
- **Optimizers:** 가중치 업데이트 알고리즘 (SGD, Adam 등).
|
|
- **의의:** 정적인 그래프 선언 방식(과거 TensorFlow)에서 탈출하여, 코드 실행 중에 그래프를 생성하는 유연성을 제공함으로써 복잡한 모델의 디버깅과 실험 속도를 획기적으로 향상시킴.
|
|
|
|
## ⚠️ 모순 및 업데이트 (Contradictions & RL Update)
|
|
- **과거 데이터와의 충돌:** 연구용으로는 좋지만 배포용(Production)으로는 부족하다는 비판을 TorchScript와 ONNX 지원을 통해 극복하며, 이제는 연구부터 상용 서비스까지 전 과정을 아우르는 통합 플랫폼으로 성장함.
|
|
- **정책 변화:** Antigravity 프로젝트는 에이전트의 내부 학습 로직 및 임베딩 모델 구현 시, 코드 가독성과 커스터마이징 자유도가 높은 PyTorch를 표준 프레임워크로 사용함.
|
|
|
|
## 🔗 지식 연결 (Graph)
|
|
- [[PyTorch-Lightning]], Deep-Learning-Foundations, Backpropagation-Foundations, GPU-Optimization-Foundations
|
|
- **Raw Source:** 10_Wiki/Topics/AI/PyTorch-Foundations.md
|