-
사용 예제에서 import하는 모듈명에 `Korpus`가 누락되었습니다.
`KoreanHateSpeech` -> `KoreanHateSpeechKorpus`
`KoreanPetitions` -> `KoreanPetitionsKorpus`
`KorNLI` -> `KorNLIKorpus`
`KorSTS` -> `KorSTSKorpus`
`NSMC` -…
-
`KoreanPetitions` 데이터를 예시로 들어보면,
현재 코퍼스의 instance하나를 `KoreanPetition`, 데이터를 `KoreanPetitionsData` 클래스로 구현하고 있고 `KoreanPetitionsData`의 `__getitem__`에서 on-the-fly로 `KoreanPetition` dataclass를 만드는 식으로…
-
KorNLI 외에 각자가 NLI type 으로 만드는 데이터가 있을 경우, 이를 로딩할 수 있도록 custom dataclass 를 제공합니다.
```python
class CustomLabeledSentencePairKorpus(LabeledSentencePairKorpus):
def __init__(self, files, ... ):
…
lovit updated
4 years ago
-
In the case of the monolingual model, it is shown that continue learning is possible with STS-type data.
Likewise, is there a way to continue learn with custom data in the 3 multilingual models disc…