[주제1] 모델 평가 문의

[tpark16]

1. "모델 성능이 각각 A2C, A4C 데이터에 대해 평가된다."

이 말은 각각에 대한 모델 두 개를 제출하면 A2C 모델이 A2C, A4C에 대해 두 번 평가된다는 말인가요? 그 중에서 더 높은 점수를 평가점수로 쓰나요?

2. "별도로 학습시킨 모델 2개중 체적일치도(Dice Similarity Coefficient, DSC), 유사성측도(Jaccard index, JI)이 높은 것을 제출"

이 말은 결국엔 마지막 평가할 모델은 score가 높은 모델 단 하나라는 뜻인가요?(두 개 모델을 제출해도)

[DatathonInfo]

안녕하세요 참가자님,

1. 만약 두개의 모델을 제출하신다면 모델별로 각각의 데이터셋에 대하여 평가됩니다. 다시 말씀 드리자면, A2C 모델은 A2C 데이터셋에, A4C 모델은 A4C 데이터셋에 대하여 평가됩니다.

2. 해당 질문은 #36 의 답변에서 발췌하신 것으로 보입니다. 해당 질문에 대한 답변은 모두 학습 시킨 모델 1개 와 별도로 학습시킨 모델 2개 중 성능이 높은 모델을 제출해 달라는 뜻이었습니다.

모델 제출은 1개 혹은 2개가 가능하며, 1개 제출 시 A2C와 A4C 모두 하나의 모델로 평가되고, 2개 제출 시 A2C 모델은 A2C데이터, A4C 모델은 A4C 데이터에 대하여 평가됩니다.

감사합니다. H.D.A.I.2021 운영팀 드림