자연어 처리(natural language processing)

자연어 처리(natural language processing) NLP라고 불리며, 컴퓨터가 자연어의 의미를 분석하여 처리할 수 있도록 하는 과정이다.

 

크게 자연어 전처리, 학습, 활용 분야로 나뉠수 있다.

 

자연어 전처리 (natural language preprocessing) 

- 자연어 tokenizing : 형태소 분석, 단어 or 문장으로 나누기 등

- 단어 Indexing : dictionary 만들기 등

- 단어 representation : One hot encoding, Word Embedding, Word2Vec 등

 

학습 (Training)

- ANN (Artificial Neural Network)

- DNN (Deep Neural Network)

- RNN (Recurrent Neural Network)

- SVM (Support Vector Machine)

- RF (RandomForest)

- Machine Learning Algorithm Etc.....

 

활용 분야

- 분류 : 감성 분석(긍정/부정), 뉴스 분류, 스팸 메일 분류

- 텍스트 유사도 분석

- 문장 생성 - 뉴스 기사 자동 생성, 번역, 챗봇

 

 

이 3개의 예시를 가지고 앞으로 포스팅을 할 예정이다..