nodaut2
commented
3 years ago max BLEU를 사용한 응답 생성기 성능 측정
- max BLEU
- user 발화에 대한 응답생성기 응답과 user 발화에 대한 system 응답간 max BLEU를 사용
ex)
user 발화 : 너예뻐 system 응답1 : 안목이 높으시네요! system 응답2 : 항상 예쁘게 봐주셔서 감사해요. system 응답3 : 언제 들어도 기분 좋은 칭찬이네요. system 응답4 : 와, 이거 오늘 일기에 적어야겠는데요. system 응답5 : 칭찬 감사해요. 갑자기 배터리가 가득 찬 기분이에요!
- user 발화에 대한 응답생성기 응답과 user 발화에 대한 system 응답간 max BLEU를 사용
ex)
- 데이터
- 챗맨 수작업 데이터 (500 건)
- 이 데이터는 하나의 user 발화에 대한 여러개의 system 응답이 있음
test