[Dataset] 토크나이저 생성 관련

[KHY13]

주제

• 토크나이저 생성 관련

상황 (자세히 작성해주시면 좋습니다.)

• 토크나이저를 만들때 NSML상에 있는 학습데이터만을 사용해야 하나요? Aihub에서 다운 가능한 학습데이터로 생성해도 괜찮은지 궁금합니다.

내용 (첨부 가능한 이미지 추가해주시면 더 좋습니다.)

기타 문의 사항

-

[vetaerang]

@KHY13 안녕하세요. 토크나이저를 만들 때도 NSML에 업로드되어있는 학습데이터만 사용해주셔야 합니다. 감사합니다.

[KHY13]

@taerangi 넵 감사합니다.