Wiki cleanup: error-doc removal, dedup merge, link normalization
10_Wiki/Topics 대규모 정리: - 오류 캡처/미완성 stub 문서 227개 제거 - 교차폴더 중복 43클러스터 병합 (63파일 → redirect) - 링크명 정규화: 깨진 링크 수정·redirect 직결·개념 매핑 ~2,400건 - 카테고리 MOC 6개 신규 생성 - Graph 섹션 미해결 related-keyword 링크 10,058건 제거 Co-Authored-By: Claude Opus 4.7 (1M context) <noreply@anthropic.com>
This commit is contained in:
@@ -151,10 +151,9 @@ def ring_attn_pjit(q, k, v, mesh):
|
||||
**기본값**: Striped Ring Attention with online softmax + NCCL ring + Flash Attention kernel as inner block.
|
||||
|
||||
## 🔗 Graph
|
||||
- 부모: [[Attention Mechanism]] · [[Distributed Training]]
|
||||
- 변형: [[Striped Attention]] · [[Context Parallelism]]
|
||||
- 응용: [[Long Context LLMs]] · [[Gemini]] · [[Claude Opus 4.7]]
|
||||
- Adjacent: [[Flash Attention]] · [[Sequence Parallel]] · [[Tensor Parallel]] · [[Online Softmax]]
|
||||
- 부모: [[Transformer_Architecture_and_LLM_Foundations|Attention Mechanism]] · [[Distributed Training]]
|
||||
- 응용: [[Gemini]]
|
||||
- Adjacent: [[Flash Attention]] · [[Online Softmax]]
|
||||
|
||||
## 🤖 LLM 활용
|
||||
**언제**: 매 long-context model 의 train/serve 의 evaluating, infra design 의 시.
|
||||
|
||||
Reference in New Issue
Block a user