AI
word2vec 속도 개선 - 남은 주제
word2vec을 사용한 애플리케이션의 예 word2vec으로 얻은 단어의 분산 표현은 비슷한 단어를 찾는 용도로 이용할 수 있다. 또, 자연어 처리 분야에서 단어의 분산 표현이 중요한 이유는 전이 학습(tramsfer learning)에 있다. 전이 학습은 한 분야에서 배운 지식을 다른 분야에도 적용하는 기법이다. 단어의 분산 표현은 단어를 고정 길이 벡터로 변환해준다는 장점도 있다. 문장(단어의 흐름)도 단어의 분산 표현을 사용해 고정 길이 벡터로 변환할 수 있다. 가장 간단한 방법은 문장의 각 단어를 분산 표현으로 변환하고 그 합을 구하는 것이다. bag-of-words라고 하며, 단어의 순서를 고려하지 않는 모델이다. 단어의 분산 표현을 이용한 시스템의 처리 흐름 자연어로 쓰여진 질문을 고정 길이..
2021. 1. 7. 02:21
최근댓글