AnimalDatathonKorea / adk2021

7 stars 1 forks source link

PCK 관련 문의 #12

Open gulby opened 3 years ago

gulby commented 3 years ago

안녕하세요. PCK 관련하여 문의 드립니다.

성능 평가시 자동으로 두 기준 모두에 대해 참여되며 성능평가가 진행됨

(기준 1) 키포인트 정확도(PCK, Percentage of Correct Keypoints) 기준
1장당 일정 시간(1 sec) 이하의 수행시간 중 가장 높은 키포인트 정확도

(기준 2) 수행시간(sec) 기준
일정 키포인트 정확도(PCK 85%) 이상 중 1장당 가장 짧은 수행시간

공지 내용 중 위 사항에 대한 상세 질문입니다.

  1. 기준2 의 PCK 85% 는, 어떤 keypoint 들간의 거리/diameter 를 기준으로 하는지요? (Human 인 경우 head 혹은 torso)
  2. 기준1 에는 단순히 PCK 라고만 되어 있는데, 기준 keypoints 간 거리/diameter 의 몇 % 를 사용하는지요?

확인 부탁드립니다. 감사합니다.

Animal-Datathon-korea commented 3 years ago

안녕하세요. Animal Datathon Korea 2021 운영사무국입니다.

문의 주신 내용 답변 드립니다.

  1. 해당 정확도는 PCK이기 때문에 torso기준으로 평가를 합니다. (head는 PCKh)
  2. 위에서 설명한 해당 torso 기준 거리의 20%를 사용합니다.

감사합니다.