"훈민정음에 스며들다"-대화요약 역량평가

1. 평가

• 본대회에서는 모델이 예측한 생성요약문과 사람이 생성한 요약문의 ROUGE-N에 대한 F1 SCORE를 사용함
• 예/본선의 평가산식과는 차이가 있을 수 있습니다.

• 채점 기준: ROUGE-1(점수1), ROUGE-2(점수2), ROUGE-L(점수3)
• 순위 기준

- 3가지 지표에대한 개별 순위의 합산 오름차순( ex - ROUGE-1:1위, ROUGE-2:3위, ROUGE-L:2위 => 1+3+2=6점)

- 합산 점수 동률시 제출 시간 오름차순

• Public Leaderboard Score로 최종순위가 결정됩니다.
• 최종 순위는 선택된 파일 중에서 채점되므로, 참가자는 제출 창에서 자신이 최종적으로 채점 받고 싶은 파일을 선택해야 함. (최종 파일 미선택시 Public 점수가 가장 높은 파일로 자동 선택됨)

2. 개인 또는 팀 참여 규칙

• 개인 또는 팀을 이루어 참여할 수 있습니다.
• 개인 참가 방법: 팀 신청 없이, 자유롭게 제출 창에서 제출 가능
• 팀 구성 방법: 팀 페이지(https://www.dacon.io/competitions/official/235818/team/)에서 팀 구성 안내 확인
• 팀 최대 인원: 4 명

                   * 동일인이 개인 또는 복수팀에 중복하여 등록 불가.

3. 외부 데이터 및 사전 학습 모델

• 외부 데이터 사용이 불가합니다. 
• 법적 제약이 없으며 공개(2021년 9월 27일 전) 된 사전 학습 모델 사용 허용
• 테스트 데이터는 추론 과정에서만 사용 가능

4. 유의 사항

• 1일 최대 제출 횟수: 10회
• 대회기간 내 최대 제출 횟수: 30회
• 사용 가능 언어: Python
• 모델 학습에서 검증 혹은 평가 데이터셋 활용(Data Leakage) 또는 수기 작성 시 실격
• 최종 순위는 선택된 파일 중에서 채점되므로 참가자는 제출 창에서 자신이 최종적으로 채점 받고 싶은 파일을 선택해야 함
• 데이콘은 부정 제출 행위를 금지하고 있으며 데이콘 대회 부정 제출 이력이 있는 경우 평가가 제한됩니다. 자세한 사항은 링크를 참고해 주시기 바랍니다. https://dacon.io/notice/notice/13
• 본 대회 페이지 url 유출을 금지합니다.

5. 대회 문의(질문)

• 대회 운영 및 데이터 이상에 관련된 질문 외에는 답변을 드리지 않고 있습니다. 기타 질문은 토론 페이지를 통해 자유롭게 토론해주시기 바랍니다.