Store Credit Card Sales Forecast Contest

안녕하세요 세원님,

저희는 대회 기획 단계에서 평가산식을 RMSE로 할지 MAE로 할 지 고민을 했습니다.

 

잘 알다시피, MAE는 에러에 절댓값을 취하기 때문에, 에러의 크기 그대로 반영됩니다.

그러므로 예측 결과물의 에러가 10이 나온 것이 5로 나온 것보다, 정확히 2배가 나쁜 도메인에서 쓰기 적합한 산식이죠.

즉, 에러에 따른 손실이 선형적으로 올라가는 상황에서 쓰기 적합합니다.

 

그러나, RMSE는 에러에 제곱을 하기 때문에 에러가 크면 클수록 그에 따른 가중치가 높이 반영됩니다(물론 최종 결과물에 루트를 씌우긴 하지만 여전히 높게 반영됩니다).

그러므로 예측 결과물의 에러가 10이 나온 것이 5로 나온 것보다, 정확히 2^2(4)배가 나쁜 도메인에서 쓰기 적합한 산식입니다.

즉, 에러에 따른 손실이 기하 급수적으로 올라가는 상황에서 쓰기 적합합니다.