- 강의 질문
- AI TECH
sparse 검색에 대해서 문의 드립니다.
2025.06.11 21:53 작성
안녕하세요
강의 잘 듣고 있습니다.
이번에 차수에 올라온 qdrant 파트에서 sparse 검색에서 이전에 제가 알고 있었던 것은 형태소 분석기 + BM25 조합으로 해서 하는 것으로 알고 있었는데 이번 강의에서는 fastembed라는 라이브러리에서 제공하는 sparse 임베딩 모델을 써서 하는 것으로 보였습니다.
이렇게 할 경우에도 한국어 키워드에 대해서 잘 검색이 되나요? 형태소 분석기를 이용한 방법이랑 비교했을 때 어떤지 궁금합니다.
그리고 bge-m3 모델도 dense 뿐만 아니라 sparse vector도 지원하는 것으로 알고 있는데 bge-m3를 안쓰고 fastembed를 쓴 이유가 있으실까요?
확인 부탁드립니다.
감사합니다.