validation 잘 작동 하시나요?

전력사용량 예측 AI 경진대회

2021.05.28 12:51 4,589 조회

smape를 만들어서 validation에 활용하고 있는데요

validation상에서 smape는 더 줄었는데 제출시에 스코어가 한자리수에서 30이상으로 뛰는 현상이 발생합니다.

validation에서는 왜 걸러주지 못하는 걸까요?

로그인이 필요합니다

comment

0 / 1000

Statistics

2021.05.28 15:52

혹시 그런 현상이 발생 시점이 언제인가요?
저도 시드 숫자 하나만 바꿨는데 25이상으로 점수가 뛴 건이 11~12시 쯤 하나 있습니다.

워낙 건물마다 특성이 명확해서 갑자기 튀기가 어려울텐데, 코드에서의 실수나 채점서버의 일시적인 오류가 아닐까 싶네요.

우장

2021.05.28 15:57

아.. 오류일수도 있는건가요 주로 자정쯤에 제출하긴 했습니다.

현재 글

validation 잘 작동 하시나요?

대회 - 전력사용량 예측 AI 경진대회

3년 전