Reader 모델 학습 시에 question & context(1개) 사용 -> question & context(5개) 사용

[raki-1203]

1. arguments.py

• with_inference 이 argument 가 type 이 str 로 되어있어서 False 가 안먹는 문제가 있길래 bool type 으로 변경

• dataset_name 데이터셋을 basic, concat, preprocess, random_concat

2. prepare_dataset.py

concat data & preprocess data 만드는 함수들 모여있음

3. train.py

사용하지 않는 library import 부분 제거

4. utils_qa.py

사용하지 않는 library import 부분 제거 get_data 함수에서 data_args.dataset_name 에 따라서 불러오는 dataset 이 달라지도록 코딩

• basic

• preprocess

• concat

• get_args 여기에서 do_predict 가 True 인 경우 dataset_name 을 'basic' 으로 고정해줌

[sangmandu]

확인했습니다