Python(Colab) 형태소 분석 KoNLPy
✔ 자연어란? - 일상에서 사용하는 언어 - 컴퓨터는 자연어를 직접적으로 이해 할 수 없다. - 컴퓨터가 자연어의 의미를 분석해 처리 할 수 있도록 하는 일 : 자연어 처리(Natural Language Processing) ✔ 토크나이징 - 문장을 의미가 있는 가장 단어로 나눈다 - 나눠진 단어들을 이용해 의미를 분석 - 가장 기본이 되는 단어들을 "토큰"이라고 부른다. - 문장 형태의 데이터를 처리하기 위해 제일 처음 수행 해야하는 기본적 작업이다! - 토크나이징을 어떻게 하느냐에 따라 성능 차이가 생길 수 있다. ✔ 형태소 분석 - 자연어의 문장을 형태소라는 최소 단위로 분할하고 품사를 판별하는 직업 - 영어 형태소 분석은 형태소마다 띄어쓰기를 해서 문장을 구성하는 것이 기본(분석이 상대적으로 쉽다..
2023.06.09