파이썬 자연 언어 처리(Natural Language Processing, NLP) 맛보기

오늘 파이썬 패키지 koNLPy("코엔엘파이"라고 읽음)를 사용하여 형태소 분석과 워드클라우드 구현을 해보았다.

 

사실 워드클라우드는 뉴스빅데이터 분석시스템인 빅카인즈( www.bigkinds.or.kr )에서 자주 이용해왔던 터라 그다지 새롭지는 않았지만, 이를 파이썬으로도 해볼 수 있어 재미있었다. 

 

 

koNLPy를 이용한 미세먼지 기사 워드클라우드

 

그렇다면, 자연 언어 처리(NLP)란 무엇일까? 

자연어(natural language)란 우리가 일상 생활에서 사용하는 언어를 말한다. 자연어 처리(natural language processing)란 자연어의 의미를 분석하여 컴퓨터가 처리할 수 있도록 하는 일을 말한다.

 

자연어 처리는 음성 인식, 내용 요약, 번역, 사용자의 감성 분석, 텍스트 분류 작업(스팸 메일 분류, 뉴스 기사 카테고리 분류), 질의 응답 시스템, 챗봇과 같은 곳에서 사용되는 분야이다.

 

최근 딥 러닝이 주목을 받으면서, 인공지능이 IT 분야에서 중요 키워드로 떠오르고 있다. 자연어 처리는 기계에게 인간의 언어를 이해시킨다는 점에서 인공지능에 있어 가장 중요한 연구 분야이면서도, 아직 정복되어야 할 산이 많은 분야이다.

 

* 출처 : 위키독스, 딥 러닝을 이용한 자연어 처리 입문( wikidocs.net/book/2155 )

 

 

아무튼, 오늘도 즐겁게 파이썬 !