NLP (1) 썸네일형 리스트형 [자연어 기초1] 자연어 처리(NLP)의 기본 과정 - 기본 개념 자연어는 ‘처리’(processing) 한다고 합니다. 왜냐하면, 자연어를 그대로 이해하는 것이 아니라 컴퓨터가 이해할 수 있는 단어로 바꿔주어야 하기 때문입니다. 이 과정을 바로 임베딩(embedding) 이라고 합니다. 임베딩을 포함한 전체 과정을 크게보면 1)입력(여기서는 자연어) → 2)모델(함수) → 3)출력(확률, 특정 범주일 확률을 반환한다.) 이렇게 이어지게 됩니다. 그림으로 나타내면 다음과 같습니다. 입력 단계의 task에 따라서 달라지게 됩니다. 예를 들어 감성분석의 경우에는 label을 달아주어야 합니다. (긍or부) 모델에서는 출력과 정답을 비교해서 업데이트 합니다. 이 전체 과정을 train 과정이라고 합니다. 모델은 원하는 모델로 사용하면 됩니다.(딥러닝 모델이 가장 인기가 많고.. 이전 1 다음
