목록전체 글 (1)

Keep going

BM25

BM25 기반 재무제표 주석 유사 사례 검색회사에서 업무하는 과정에서 현재 공시하고자 하는 재무제표의 특정 주석 내 특정 표를 기준으로 가장 가까운 예시를 가져오는 과정이 필요함.이때 검색 대상 문서에서 가장 유사한 과거 사례를 찾아주는 Retriever가 필요함.Retriever 방법으로 임베딩 기반 검색이 아닌 BM25 방법론을 사용함.BM25는 대표적인 키워드 기반 검색 알고리즘으로, TF-IDF의 아이디어를 발전시킨 방법론임.TF-IDFTF-IDF는 특정 문서에서 특정 단어가 얼마나 중요한지를 평가하는 방법임.$$\text{TF-IDF}(t, d, D) = \text{TF}(t, d) \times \text{IDF}(t, D)$$여기서 $t$는 특정 단어(Term), $d$는 특정 문서(Docum..
코딩 2026. 9. 2. 00:00
이전 Prev 1 Next 다음