코드 검증 질문

2025 Samsung Collegiate Programming Challenge : AI 챌린지

코드 검증 질문

Spatz

2025.07.28 10:30 480 조회

안녕하세요.

코드 검증을 위해서 자료를 정리하고 있는데요,

학습 중 데이터셋을 랜덤으로 셔플했었기 때문에 (학습 코드와 최종 private score 복원이 가능한 모델 가중치, 구조 파일들은 모두 있습니다)

학습을 검증을 위해 다시 돌릴 경우 정확한 그 점수가 재현이 안될 수도 있을 것 같은데(학습 도중 문제의 순서들도 미묘한 영향을 끼친다고 알고 있어서요)(random seed및 하이퍼파라미터 기재 예정입니다)

이와 관련해서는 어떤 기준이 적용되는지 알 수 있을까요?

감사합니다.

댓글 3개

로그인이 필요합니다

comment

0 / 1000

DACON.GM

2025.07.28 11:02

어느정도 랜덤요소에 의한 오차는 감안되나, 순위 혹은 커트라인 기준에 크게 벗어나는 결과가 재현된다면 재현 불가로 판단됩니다.

Spatz

2025.07.28 12:18

1. 혹시 오차가 얼마나 감안이 되는지 여쭤볼 수 있을까요? (주최 측에서는 학습 코드를 다시 돌릴 때 시도를 몇 번 하실 것인지도 여쭤볼 수 있을까요)
2. 해당 학습을 통해 나왔던 모델 가중치 구조 파일이 존재하고 그 파일에 이상이 없음에도 재현 불가라고 판단이 되는건가요?
3. 제가 제출할 코드를 다시 다 돌려보았을 때 점수가 재현이되는지 확인할 방안이 있는지도 궁금합니다. 감사합니다.

DACON.GM

2025.07.28 12:17

다시 말씀드리자면 '순위 혹은 커트라인 기준에 크게 벗어나는 결과가 재현된다면 재현 불가로 판단됩니다.'

📣 댓글 작성 창의 위치가 댓글 리스트 상단으로 이동했습니다!