kuku-forum
commented
8 months ago - docllm 같은 doc 분석 전문 페이퍼를 확인했다, 그런데 어짜피 gpt4 쓸꺼면 이걸 볼 필요가 있을까?
- 그렇다면 gpt4에서 논문을 서로비교하는 프롬프트를 찾지 못했다
- langchaing에서 진행하는 document comparison 기능을 보면 다음과 같다
- 두가지 논문에 각각 Question 진행
- 각 받은 Answer를 서로 비교하는 Question을 다시 LLM에게 보냄
- 결과를 잘 정리해서 보여줌
즉 Multi-Q&A CoT 방식인거 같은데 이럴경우 정답인지 아닌지 확인이 안되는것으로 보인다
유사한 방법중에 prompt-tuning으로 해결한게 있는지 찾아보는것이 필요하다
metric of paper comparison