자연어 처리 편집하기

[[분류:데이터 과학]]

;NLP, Natural Language Processing
;인간의 언어를 기계적으로 분석해서 컴퓨터가 이해할 수 있는 형태로 만들거나 혹은 컴퓨터가 처리한 결과를 이해할 수 있는 언어로 표현하는 제반 기술

==접근법 구분==
===규칙/지식 기반 접근법===

;Symbolic Approach

*[Now] [Weather] [What]
*무식한 방법이지만 현대 챗봇, 인공진공 스피커 등에서 가장 많이 적용되는 방법

===확률/통계 기반 접근법===

;Statistical Approach

*TF-IDF

===딥러닝 적용법===

*기존 접근법에 딥러닝 학습 적용

==기술 구분==
===NLU=== 

;Natural Language Understanding

====과정====
{| class="wikitable"
|-
!기술!!설명
|-
|형태소 분석||
*명사, 동사, 형용사, 조사
*어간추출, 색인 및 벡터화
|-
|구문 분석||
*명사구, 동사구, 형용사구
*문장 경계 인식, 구문간 의미 관계 파악
|-
|의미 분석||
*문장 의미 분석
*사용자 의도 파악
|-
|담론 분석||
*문맥 이해
|}

====기반 기술====

*[[워드 임베딩]], [[Word2Vec]]
*[[Bag of Words]]
*[[TF-IDF]]
*[[N-Gram]]
*[[RNN]]

===NLG===

;Natural Language Generating

{| class="wikitable"
|-
!기술!!설명
|-
|문장 계획||
*전달하고자 하는 의미 계획
|-
|어휘 선택||
*전달하고자 하는 의미에 해당하는 어휘 선택
|-
|문장 생성||
*계획에 따라 어휘 나열
|-
|담론 생성||
*문장 간 결합
|}

== 같이 보기 ==

* [[워드 임베딩]]
* [[BERT]]
설명	입력하는 내용	문서에 나오는 결과
기울임꼴	''기울인 글씨''	기울인 글씨
굵게	'''굵은 글씨'''	굵은 글씨
굵고 기울인 글씨	'''''굵고 기울인 글씨'''''	*굵고 기울인 글씨*