Langchain 과 OpenAI 를 이용한 데이터 임베딩과 RAG(Retrieval-Augmented Generation)

  임베딩이란? 자연어처리에서 사람이 쓰는 자연어를 기계가 이해할 수 있도록 숫자형태인 Vector로 바꾸는 과정 혹은 일련의 전체 과정을 의미한다. One-Hot Enconding 단어 집합의 크기를 벡터의 차원으로 하고...

R&D AI bert data embedding dense fastText One-Hot openai embedding sparse vectorstore Word2Vec