Aimers 8th : Model Compression Offline Hackathon

1. 개인 또는 팀 참여 규칙

• 오프라인 해커톤(Phase3) 기간 동안에는 추가 팀 결성 및 구성원 변경, 팀명 변경 불가능

2. 대회 규칙

1) 대회 지정 기본 모델

• LGAI-EXAONE/EXAONE-4.0-1.2B [허깅페이스 링크]

※ 본 해커톤에 제출하는 모델은 기본 모델인 EXAONE-4.0-1.2B로부터 참가자가 직접 파생한 경량화 모델로 한정됩니다.

2) vLLM 패키지 커스텀 수정 가능

• 참가자는 vLLM 패키지 내의 소스 코드, CUDA 커널, 내부 로직을 수정할 수 있습니다.
• 다만, 수정된 vLLM은 반드시 .whl 파일로 빌드하여 모델과 함께 제출해야 합니다. 빌드는 제공된 Docker 환경에서 진행하며, 빌드 방법은 [가이드 노트북]을 참고해주세요.
• 평가 서버는 제출된 .whl 파일을 자동으로 설치하여 평가에 사용합니다.

3) 외부 데이터 사용 가능

• 참가자가 모델 학습 또는 튜닝이 필요한 경우 외부 데이터 사용이 가능합니다.
• 단, 최소한 비상업적 이용이 허용된 라이선스(CC BY-NC, CC0 등)로 배포된 외부 데이터만 사용할 수 있습니다. 해당 조건을 충족하지 않는 외부 데이터는 사용이 불가능합니다.

4) 모델 경량화 및 성능 유지·향상을 위한 추가 학습/튜닝

• 참가자는 제공된 기본 모델인 EXAONE-4.0-1.2B 모델을 대상으로, 모델 경량화뿐만 아니라 기본 모델 성능의 유지 또는 향상을 목적으로 추가 학습 또는 파라미터 튜닝을 수행할 수 있습니다.
• 모델 경량화를 위한 기법에는 제한이 없으며, 적용 방식과 무관하게 최종 결과물이 허깅페이스(Hugging Face) 표준 형식의 모델 가중치 및 설정 파일로 제출 가능한 경우에 한해 평가 대상이 됩니다.

3. 산출물 제출 규칙

• 오프라인 해커톤(Phase3) 종료 후 최종 리더보드 상위 10팀은 아래의 양식에 맞추어 코드와 발표자료(PDF)를 제공한 GPU서버 내 /workspace/산출물 경로에 구성하여 기한 내 운영진에게 제출

o 코드 파일 확장자: .py, .ipynb

o 코드와 주석 인코딩: UTF-8

[제출 파일 목록]

o (필수) 개발 환경(OS) 및 라이브러리 버전, 학습 과정에서 외부데이터를 활용한 경우 데이터 출처 포함

o (필수) 최종 리더보드 점수를 재현할 수 있는 학습/경량화 코드 (= 리더보드에 제출한 model 폴더를 동일하게 생성할 수 있는 코드)

o (필수) 8분 분량의 발표 자료 (16:9 비율로 작성 및 PDF로 변환 필수)

5. 유의 사항

• 1일 최대 제출 횟수: 25회
• 사용 가능 언어: Python
• 규칙 위반 사항 적발 시 수상 및 발표평가 진출 불가능
• 모든 학습, 추론의 과정 그리고 추론의 결과물들은 정상적인 코드를 바탕으로 이루어져야 하며, 비정상적인 방법으로 얻은 제출물들은 적발 시 규칙 위반에 해당됩니다.
• 대회 직후 공개되는 Public 랭킹은 예선 최종 순위가 아니며 코드 검증과 발표 평가 이후 본선 진출자가 결정됩니다.
• 코드 제출 기능을 악용한 의도적인 평가 데이터셋 유출 등을 포함한 규칙 위반 사항이 발견되는 경우 실격에 해당합니다.
• LLM 기반 모델의 비결정적 실행 특성 및 평가 서버 환경(시스템 부하, 스케줄링 등)에 따라, 동일한 제출물(제출 모델)이라 하더라도 리더보드 성능은 제출 시점마다 일부 차이가 발생할 수 있습니다.
• 이에 따라 제출 시 평가 서버에서 실제로 측정·기록된 리더보드 점수만을 공식 평가 결과로 인정합니다.
• 제출은 10:00에 마감되며, 마감 시점까지 접수된 제출물에 한해 순차적으로 채점이 진행됩니다. 단, 11:00까지 채점이 완료되지 않은 제출물은 실패 처리됩니다.
• 데이콘은 부정 제출 행위를 금지하고 있으며 데이콘 대회 부정 제출 이력이 있는 경우 평가가 제한됩니다. 자세한 사항은 아래의 링크를 참고해 주시기 바랍니다.

https://dacon.io/notice/notice/13

6. 토론(질문)

• 대회 운영 및 데이터 이상에 관련된 질문 외에는 답변을 드리지 않고 있습니다. 기타 질문은 토론 페이지를 통해 자유롭게 토론해 주시기 바랍니다.
• 데이콘 답변을 희망하는 경우 토크 게시글 또는 대면 문의 부탁드립니다.