private score 복원 관련 질문입니다.

HAI(하이)! - Hecto AI Challenge : 2025 하반기 헥토 채용 AI 경진대회

글로벌객체

2026.02.05 18:43 215 Views

안녕하세요, 좋은 대회를 열어주셔서 감사하다는 말씀 올립니다.

private score 복원 관련하여, 한가지 질문을 여쭙고 싶습니다.

코드 검증 과정에서 학습 이후의 모델로 추론을 진행하였을 때의 점수가 정확히 일치해야하는지 궁금합니다.

(학습된 모델이라는 가정 하)

혹시 조금의 오차는 허용한다면, 그 기준이 어떻게 되는 것인지 궁금합니다.

복원 기준: 재학습된 모델의 추론 결과가 Private Score와 정확히 일치해야 하는지, 혹은 통계적으로 유의미한 오차 범위(예: ±0.00x 내외)라면 인정이 되는지 궁금합니다. (같은 코드와 같은 환경에서 재학습 이후 private score 측정 시 오차가 존재하여 이러한 질문을 드리게 되었습니다)
허용 범위: 만약 오차를 허용한다면, 대략적인 허용 기준이 있는지 문의드립니다.

1 Comments

comment

0 / 1000

DACON.GM

2026.02.06 09:34

코드 검증 과정에서는 동일 코드 및 동일 환경에서 재현 수행 시 Private Score가 실질적으로 동일한 성능으로 재현되는지 여부를 기준으로 확인합니다.
실행 환경 및 연산 특성상 미세한 수치 변동은 불가피하게 발생할 수 있으며, 이에 대해 고정된 수치 기준(±0.00x 등)을 별도로 두고 판단하지는 않습니다.
대신,
1) 기존 Private Score와 비교하여 성능 수준이 유지되었는지
2) 순위에 영향을 줄 정도의 유의미한 변동이 발생했는지
3) 동일 솔루션의 재현 결과로 합리적으로 판단 가능한 범위인지
를 종합적으로 검토하여 재현 여부를 판단합니다.
기존 성능과 동일한 수준으로 재현되었다고 보기 어려운 변동이 발생할 경우에는 재현 실패로 판단될 수 있으며, 해당 이슈가 있는 경우에는 검증 기간 중 운영진의 별도 추가 요청이 있을 수 있습니다.

감사합니다.

📣 The comment input field has been moved to the top of the comment list!

List

2차 평가 제출 관련 질문입니다.

Competition - HAI(하이)! - Hecto AI Challenge : 2025 하반기 헥토 채용 AI 경진대회

Current

private score 복원 관련 질문입니다.

Competition - HAI(하이)! - Hecto AI Challenge : 2025 하반기 헥토 채용 AI 경진대회

Likes 1