Iris 너비 예측 AI 해커톤

안녕하세요 프리랜Seo 님.

Private 대회는 따로 없습니다. Private과 Public은 점수를 채점 및 공개하는 방식에 따라 나뉩니다.
일반적으로 대회에 결과물을 제출하면 "Public 리더보드"에 점수가 공개됩니다. 이는 참가자님이 제출한 결과물을 테스트 데이터셋 일부에 대해서만 계산한 점수로, "Public 점수"라고 합니다. 그리고 숨겨진 나머지 데이터에 대해 계산된 점수를 "Private 점수"라고 합니다.

Public 점수와 Private 점수를 나누는 이유는 참가자들이 테스트 데이터셋에 과적합(Overfitting)되는 것을 방지하기 위함입니다. 대회의 목적은 이 문제를 일반적으로 잘 해결하는 방법(Generalized solution)을 찾는 것이지, 특정 데이터셋에 대해서만 잘 해결하는 방법(Overfitted solution)을 찾는 것이 아니기 때문입니다. 따라서 최종 순위를 결정하는 데에 있어서는 이 Private 점수를 사용합니다. 

감사합니다.

답변 감사합니다. 
Private 순위 정의 및 취지 이해했습니다. How to 에 대한 부분까지언급될거라 예상했는데, 없어서 추가 덧글 달았습니다.

1) Private 하려면 어떻게 하면 될까요?

혹시, 제출시 마다, private public 데이터 셈플링을 달리해서, 내부 평가를 분리하고 있다고 이해하면 될까요? 예컨대, 대회기간에는 이 중에서 public만 공개하고 있는 것이고, private는 비공개로 별도 관리 (한 것도 없었는데 순식간에 private가 나타나서 최초 질의하게 된 것임)
만일 그렇다면, 답변 내용이 이랬으면 더 좋았을 것 같습니다.

1) 제출한 데이터에 대해서 결과평가 완료 후,
2)이 중에 public 데이터로 내부 셈플링 된 데이터 기준으로 public 스코어를 게시하게 되고, 
3)나머지 private 데이터로 분류된 것으로 채점확인한 결과는 따로 비공개 관리 됩니다.
4)대회기간에는 public 점수만 공개되고, 종료이후 private 점수도 게시되는 것입니다.

먼저 데이콘 내부 규정상 구체적인 평가 방식을 알려드리지 못하는 부분에 대해 너른 양해 부탁드립니다.

대회마다 평가 방식이 조금씩 상이하나 이번 대회의 평가 방식은 다음과 같습니다.

Public 점수 채점을 위한 데이터와 Private 점수 채점을 위한 데이터는 대회 기획 단계에서 나누어져 고정되어 있습니다. 즉, 제출 시마다 데이터 샘플링을 달리하지는 않습니다.

참가자님께서 결과물을 제출하시면 결과물 중에서 public 데이터 부분에 대해서만 채점을 진행하여 리더보드에 공개합니다.
그리고 대회가 종료된 뒤에 참가자님께서 선택하신 결과물의 private 데이터 부분에 대해 채점을 진행합니다.

감사합니다.