AI
자연어와 단어의 분산 표현 - 통계 기반 기법
말뭉차(corpus) 대량의 텍스트 데이터 자연어 처리 연구나 애플리케이션을 염두에 두고 수집된 텍스트 데이터 사람이 쓴 글이므로 사람의 '지식'이 충분히 담겨 있다고 볼 수 있다. 문장을 쓰는 방법, 단어를 선택하는 방법, 단어의 의미 등 파이썬으로 말뭉치 전처리 유명한 말뭉치 - 위키백과(Wikipedia)와 구글 뉴스(Google News)등의 텍스트 데이터 # 파이썬으로 말뭉치 전처리하기 # 2.3.1 text = 'You say goodbye and I say hello.' text = text.lower() # 소문자 변환 print("text.lower() : ",text) text = text.replace('.','.') print("text.replace : ", text) words ..
2020. 12. 29. 16:11
최근댓글