데이터와 인공지능 훑어보기

spaCy https://spacy.io/ spaCy · Industrial-strength Natural Language Processing in Python spaCy is a free open-source library for Natural Language Processing in Python. It features NER, POS tagging, dependency parsing, word vectors and more. spacy.io 파이썬의 자연어 처리를 위한 오픈 소스 기반 라이브러리 텍스트 전처리에서 좋은 성능을 보여주고 있음 spacy install pip install spacy # download en stopwords python -m spacy download en python ..

NLTK(Natural Language Toolkit) 교육용으로 개발된 자연어 처리 및 문서 분석용 파이썬 패키지 영어 텍스트에 대한 전처리 및 분석을 하기 위한 도구로 활용 50여 개가 넘는 corpus 리소스를 활용해 영어 텍스트를 분석할 수 있게 제공 Terminologies English 한국어 Description Document 문서 - Corpus 말뭉치 A set of documents Token 토큰 Meaningful elements in a text such as words or pharases or symbols Morphemes 형태소 Smallest meningful unit in a language POS 품사 Part-of-Speech (ex. noun) NLTK 설치 pi..