[TODO] Retriever faiss로 돌려보기

[sooyounlee]

📌 요약

• (수행 전) Baseline에 포함된 두 가지 retriever 중 faiss 성능 테스트

• (수행 후) 결과는 어땠는지

📔 상세

Before

• Baseline에 retriever가 두 가지가 포함되어 있어서, faiss의 성능이 어떤지 테스트해보기 (모델: XLM ROBERTa large, step 3000)

After

• 성능 저하 (Sparse vector에 적합한 방법이 아니어서 그런 것 같음)

[sooyounlee]

메모리 에러가 납니다..ㅜㅜ

[sooyounlee]

faiss에서 metric을 L2 노름 대신 내적(METRIC_INNER_PRODUCT)으로 설정할 수 있어서 내적으로 바꿔서 다시 결과를 봐도 좋을 것 같습니다.