[ML] 요약 태스크 개선 - Githubissues

Team-WeQuiz / wequiz

Shall We Quiz?😆 AI가 생성한 퀴즈를 친구들과 함께 푸는 서비스

https://wequiz.kr

9 stars 4 forks source link

[ML] 요약 태스크 개선 #493

Open noooey opened 4 months ago

noooey commented 4 months ago

개요

요약 태스크를 개선합니다.

작업 내용

요구사항 상세 작성

[ ] 속도 높일 방법
[ ] 토큰 사용량 줄일 방법
[ ] 그냥 맵리듀스 방식 말고 다른 방법은 없을지...더 효율적이고..알뜰살뜰한...방법...
[ ] 문서 배치처리??
[x] text splitter yield로 처리해서 split docs를 generator 형태로 처리해보기

참고

링크