농업 환경 변화에 따른 작물 병해 진단 AI 경진대회

2차 평가 점수 산출

2022.02.02 20:38 2,347 Views

혹시나 모르실 분이 있을까봐 글을 올립니다.

제가 문의드린 내용에 대한 답변은 아래와 같습니다.

사실상 2차 평가에서 F1-score의 점수 영향력은 매우 미미할 듯 합니다.

오히려 수치로 확실히 산출될 수 있는 평가 점수로서는 동작 시간이 유의미하게 작용하지 않을까 합니다.


-------------------------------------------------------------------------

2차 점수 산정 과정에서는 상대적인 점수(평가 분야별 랭킹)와 절대적인 점수(F1-score 혹은 동작 시간)를 함께 사용하여 계산합니다.


리더보드 Private 점수를 예로 들면, 리더보드 1위에게는 30점이 부여되고, 1위의 절대적 점수를 기준으로 이하 순위의 점수를 계산합니다.

계산식: (n위의 절대적 점수 / 1위의 절대적 점수) * 30 

동작 속도 또한 같은 방식으로, 동작 속도 부문 1위에게는 15점이 부여되고, 1위의 동작 시간을 바탕으로 이하 순위의 점수를 계산합니다.


이처럼 각 분야별로 상대적인 점수와 절대적인 점수가 같이 사용되기 때문에, 

정확도와 속도 중 어느 것이 더 점수에 큰 영향을 미칠지는 참가자님들께서 직접 판단해주셔야 합니다.

로그인이 필요합니다
0 / 1000
아리오
2022.02.03 02:36

좋은 답변 공유 감사합니다.

ixxi
2022.02.03 14:34

정보 감사합니다!

퉤홍
2022.02.03 15:11

리더보드 상의 점수는... 변별력이 많이 떨어지겠네요.. 좋은 정보 감사합니다!

yasuo
2022.02.03 18:12

정보 공유 감사합니다.