안녕하세요.

먼저 재현성과 관련하여 질문해주신 분이 계셨는데, 답변으로는 보통 재현 평가는 ‘재학습’을 진행하여 추론한 결과를 바탕으로 확인한다고 말씀해주셨습니다.

다만 대회 [산출물 목록]에서 아래와 같이 명시되어 있습니다.

1. Private Score 복원이 가능한 전체 개발 코드: 학습과 추론 코드는 반드시 분리
2. Private Score 복원이 가능한 추론용 모델 가중치(Weight) 파일
3. 모델 개발 보고서: 본선 평가 항목을 포함한 자유 양식으로 작성

이렇게 weight 파일까지 동봉하도록 되어 있는데, 사전에 학습된 모델별 weight를 기반으로 추론하여 재현성 평가를 진행하시는 것인지,

아니면 재학습을 통해 새로 생성된 weight를 기반으로 추론을 수행하여 평가하시는 것인지 이 부분이 잘 이해가 되지 않아 여쭤봅니다.

그리고 또 한가지 타 대회들과 마찬가지로 복원 스코어에서 어느정도의 오차범위 수준은 인정해주시는지 궁금합니다.

감사합니다.