[리더보드 평가 및 심사 결과]
1. 리더보드
- 평가 산식 : 총점(Score) = 0.5 x 평균 예측오차율(1-NMAE) + 0.5 x 정산금획득률(FICR) [코드 바로가기]
평가는 실제 발전량이 설비용량의 10% 이상인 시간대만 대상으로 합니다.
1) 1-NMAE
그룹별 NMAE = 평균( |예측 발전량 - 실제 발전량| / 그룹 설비용량 )
각 그룹별로 예측 발전량과 실제 발전량의 차이를 계산한 뒤, 이를 그룹 설비용량으로 나누어 평균합니다.
1-NMAE = 1 - 3개 그룹 NMAE 평균
값이 높을수록 예측 오차가 작다는 의미입니다.
2) 정산금획득률
그룹별 FICR = 획득 정산금 / 이론상 최대 정산금
각 시간대별 NMAE 기준에 따라 획득 정산금을 계산하고, 이를 이론상 최대 정산금과 비교합니다.
FICR = 3개 그룹 FICR 평균
시간별 정산금은 아래 기준에 따라 산정합니다.
- Public Score : 전체 평가 데이터 중 사전 샘플링된 40%
- Private Score : 전체 평가 데이터 중 나머지 60%
2. 평가 및 심사 결과
- 1차 평가: 리더보드 Private Score(100%)
- Private 리더보드 상위 30팀(예비 10팀 포함)은 최종 산출물을 제출해야 하며, 산출물 검증을 통과한 상위 20팀을 대상으로 2차 평가(오프라인 발표평가)를 진행합니다.
- 2차 평가: 1차 평가(리더보드 Private Score) 점수 50%와 오프라인 발표 평가(정성 평가) 점수 50%의 합산 최종 상위 10팀이 수상자로 선정
- 오프라인 발표 평가 항목 및 배점
[제출자료 안내 및 제출 방법]
1. 1차 평가
1) [필수] 모델 예측 결과 파일(CSV)
- 제출 기한 : 26. 08. 14(금) 오전 10:00 까지
- 제출 방법 : [제출] 탭에 예측 결과 파일 업로드
※ 파일 제출 시 마다 순위가 가장 높은 파일이 자동으로 선택됨.
최종 채점받고 싶은 파일이 순위가 가장 높은 파일이 아닌 경우 채점 받고 싶은 파일을 직접 선택할 수 있음
※ 1일 최대 제출 횟수 : 5회
2. 2차 평가
1차 평가 종료 후 Private 리더보드 상위 30팀(예비 10팀 포함)은 2차 평가 대상팀으로 아래의 양식에 맞추어 코드, 발표 자료를 dacon@dacon.io 기한 내 메일로 제출
※ 메일 발송 시 제목을 '[팀명] 제3회 풍력발전량 예측 AI 경진대회 산출물 제출' 로 통일
※ 제출 기한 : ~ 8. 17(월) 오전 10시까지
1) [필수] 코드 / 모델 / 외부데이터
- 제출 형태
⓵ Private Score 복원이 가능한 코드와 모델 파일
- 학습 코드(train)와 추론 코드(inference)는 반드시 분리하여 별도 코드 파일로 구성
- 코드 파일 형태는 .py 또는 .ipynb 가능
⓶ 외부 데이터 사용 시 사용한 모든 외부 데이터 파일
- 제출 양식
※ 제출한 코드는 오차 범위 내 Private Score 복원이 가능해야함
⓵ 코드와 주석 인코딩 : UTF-8
⓶ 모든 코드는 오류 없이 실행되어야 함(라이브러리 로딩 코드 포함)
⓷ 개발 환경(OS) 및 라이브러리 버전 기재
2) [필수] 발표 자료
- 제출 형태 : 발표 10분 분량의 자유 양식으로 문제 해결 솔루션 PDF로 제출
※ 발표는 '솔루션 발표자료(PDF)' 파일로 진행 * 기술적 오류 방지를 위해 PPT는 허용되지 않음
3) [필수] 참가 자격 증빙 서류
- 참가 자격 '대회 기간(7.6 ~ 8.14) 기준 대학(원)생' 또는 '졸업예정자 및 취업준비생'을 증빙할 수 있는 서류 제출
- 재학증명서, 휴학증명서 등 참가 자격을 증빙할 수 있는 팀원 전체의 서류를 산출물과 함께 제출
- 특히 대학(원)생에 해당하지 않은 '취업준비생'의 경우 '건강보험자격득실확인서'의 직장 가입자 기준으로 판단함
20,000,000 KRW
