2nd/10_Wiki/Topics/AI/NLP (Natural Language Processing).md

id, category, confidence_score, tags, last_reinforced

id	category	confidence_score	tags	last_reinforced
P-REINFORCE-AUTO-NNLP-001	10_Wiki/💡 Topics/AI	0.99	auto-reinforced nlp natural-language-processing linguistics computational-linguistics ai	2026-04-20

NLP (Natural Language Processing)

📌 한 줄 통찰 (The Karpathy Summary)

"기계와 언어의 가교: 인간이 일상적으로 쓰는 복잡하고 모호한 자연어를 컴퓨터가 이해하고, 분석하고, 생성할 수 있게 만드는 인공지능의 핵심 분야이자 실질적인 '컴퓨터의 문해력' 교육."

📖 구조화된 지식 (Synthesized Content)

자연어 처리(NLP)는 컴퓨터와 인간 언어 사이의 상호작용을 연구하는 학문입니다.

1. 주요 태스크:
   • Sentiment Analysis: 텍스트에 담긴 감정 파악.
   • Machine Translation: 서로 다른 언어로 번역. (Language-Models와 연결)
   • NER: 텍스트 속 고유 명사 식별.
   • Summarization: 긴 글을 핵심 위주로 요약.
2. 왜 중요한가?:
   • 인류 지식의 80% 이상은 비구조화된 '텍스트' 형태로 존재하며, 이를 기계가 활용하려면 반드시 통과해야 하는 관문이기 때문임. (Information-Society의 기반)

⚠️ 모순 및 업데이트 (Contradictions & RL Update)

• 과거 데이터와의 충돌: 과거에는 형태소 분석, 구문 트리 등 수동 언어학 규칙 정책이 중심이었으나, 현대 정책은 이 모든 규칙을 거대 신경망 안의 패턴 정책으로 통합한 '엔드-투-엔드 딥러닝 정책'으로 패러다임이 완전히 전환됨(RL Update). (Large Language Models (LLM)와 연결)
• 정책 변화(RL Update): 단순 텍스트 이해 정책을 넘어, 문맥에 담긴 의도(Intent)와 뉘앙스, 그리고 문학적 비유까지 생성해 내는 '생성형 NLP 정책' 시대로 진입함. (Gen-AI와 연결)

🔗 지식 연결 (Graph)

• Large Language Models (LLM), Language-Models, Gen-AI, HCI (Human-Computer Interaction), Inquiry-Based Learning
• Modern Tech/Tools: Transformers, NLTK, spaCy, Hugging Face, Word embeddings.

---