[EXP] Denoising

[yeseoLee]

ISSUE: Experiment

노션 링크

원본

• https://www.notion.so/cukminseo/b4eb17df4edd4f82a103fa2a0f7bc1c1?pvs=4

실험

• https://www.notion.so/cukminseo/bd1091987b8a4724a4644d26b19c6a54?pvs=4
• https://www.notion.so/cukminseo/c21e95f8c4a5499bad1037109d78f388?pvs=4

실험 목적

• 노이즈로 분리된 데이터 중 복구 불가능한 데이터는 제거하고, 나머지 데이터를 복구하는 과정을 거친다.

체크리스트

• [ ] 과한 노이즈 제거
• [ ] 약한 노이즈 복구
• [ ] 데이터셋 생성, 업로드, 제출

실험 내용

• 형태소 기반
• 문장 길이 기반
• 토큰 분류 모델 기반