SW중심대학 공동 AI 경진대회 2023

SW중심대학 | 알고리즘 | 비전 | 객체분할 | DiceScore

  • moneyIcon 상금 : 총 1,700만원
  • 1,061명 마감

 

DAKER! 대회 관련 문의

2023.05.02 15:12 2,799 조회

안녕하세요. 참가자 여러분 대회 관련 자주 묻는 질문들을 모았습니다.

그 외 대회 관련 궁금하신 부분은 댓글로 남겨주세요. 즐거운 코딩 되세요.🧑‍💻🧑‍💻


[팀 구성]

Q) 팀 구성 기간이 지났는데 추가로 등록 가능한가요?

  • 팀 구성 기간 이후에는 팀을 구성할 수 없습니다.

Q) 팀 원 초대는 어떻게 하나요?

  • 대회 페이지의 '팀' 탭에서 팀원을 초대할 수 있습니다. 닉네임, 이메일, 팀 이름을 통해 팀원을 초대하고 해당 팀원이 '팀' 탭에서 초대를 수락하면 팀이 구성됩니다.

Q) '최초 1회 제출'의 의미가 무엇인가요?

  • 팀 구성을 하기 위해서는 대회 '제출' 탭에서 적어도 1회 제출을 해야 합니다.

Q) 팀 구성이 안돼요

  • 팀 구성은 팀 구성 기간 내에 팀원을 초대해 진행할 수 있습니다. 팀 구성 기간과 팀원 초대 방법을 대회 '팀' 탭에서 확인해 주세요.

Q) 팀 탈퇴 후 재구성하고 싶은데 방법이 있나요?

  • 아이디어 공유 방지를 위해 팀 탈퇴 후 재구성은 불가능합니다.


[제출 파일]

Q) 최종 파일은 어떤 걸 제출하면 되나요?

  • Private 채점 결과가 가장 좋을 것으로 예상되는 파일을 선택하여 제출하시면 됩니다.

Q) 최종 파일 제출 방식은 어떻게 되나요?

  • 해당 대회 페이지에서 '제출' 메뉴를 통해 진행할 수 있습니다. 대회 종료 전, 파일을 선택 후 '제출' 버튼을 클릭하면 제출이 진행됩니다.
  • (단, 최종 제출물을 선택하고 저장한 뒤 추가로 파일을 제출하면 앞선 선택은 초기화됩니다. 초기화될 경우, Public 기준으로 가장 높은 순위의 제출물이 자동으로 선택됩니다.)

Q) Baseline 코드에서 쓴 라이브러리만 사용해야 하나요?

  • 베이스라인은 참고용 자료이므로, 참가자분들만의 코드를 작성해 주시면 됩니다.

Q) 제출 결과물을 삭제하고 싶어요

  • 제출 결과물을 개별 삭제하는 것은 불가능합니다.

Q) 대회 종료 후에도 결과물 제출이 가능한가요?

  • 연습이 가능한 대회는 제출이 가능합니다.

Q) 제출 파일 점수 확인은 어떻게 하나요?

  • 최고 점수는 리더보드에 표시되며 각 파일의 점수는 '제출' 탭에서 확인하실 수 있습니다.

Q) 최종으로 선택할 수 있는 파일 개수는 몇 개인가요?

  • 최종 파일 선택 개수는 각 대회 규칙에서 확인해 주시기 바랍니다.

Q) csv파일 제출 시 에러가 발생합니다.

  • 제공된 sample_submission.csv 파일과 제출 파일의 행, 열 의 크기가 동일해야 합니다. 만약 해당 부분이 일치하지 않을 경우 에러가 발생할 수 있습니다.



[리더보드 점수]

Q) 리더보드에서 점수가 삭제되었습니다.

  • 대회 규정 위반이 의심되는 경우 치팅 처리되어 점수가 삭제됩니다. 점수 복구를 위해서는 코드를 제출하여 검증을 받아야 합니다.

Q) 리더보드 업데이트 시간이 어떻게 되나요?

  • Public Score는 실시간으로 최고 점수가 업데이트되며, Private Score는 대회 종료 후 점수 계산에 오류가 없는지 내부 확인을 거친 뒤 공개됩니다.

Q) 동점인 경우 어떻게 하나요?

  • 동점의 경우 해당 점수를 먼저 기록한 팀이 높은 순위에 위치하게 됩니다.

Q) 리더보드 점수에 문제가 있는 것 같습니다.

  • 리더보드 점수에 이상이 있다고 여겨지는 경우, 데이콘 계정의 메일로 해당 제출물을 설명과 함께 전달해 주시면 확인하여 답변드리겠습니다.

Q) 그간 제출한 모든 파일의 Private 점수가 궁금해요.

  • 최종 선택한 파일 이외의 제출물에 대해서는 따로 Private Score를 계산하지 않습니다. 다만, 대회 종료 이후 연습 기간에 정답 파일을 제출하면 '제출' 탭에서 Private Score를 확인하실 수 있습니다.

Q) Private, Public 차이가 뭔가요?

  • Test 데이터를 특정한 비율로 나누어 Private Score와 Public Score를 계산합니다. Public Score는 대회 기간 중에 리더보드에서 확인 가능합니다. Private Score는 대회 종료 후 리더보드에서 확인 가능하며 Private Score를 통해 최종 순위가 결정됩니다.


[규정]

Q) 코드 검증 과정에서 규정 위반이란 어떤 것 인가요?

  • Test 데이터를 모델 학습 시 활용하거나, 허가되지 않은 외부 데이터 및 사전 학습 모델 사용 시 규정 위반 처리될 수 있습니다.

Q) GPU로 인해 결과물 재현이 되지 않아도 괜찮나요?

  • 최종 제출 점수와 100% 일치하지 않더라도, 순위가 변경되지 않을 수준의 차이는 감안하여 수상자를 결정합니다.

Q) 어떤 경우가 Data leakage에 해당되나요?

: Test 데이터셋은 기본적으로 '아예 볼 수 없다' 라는 가정 하에 진행해야 합니다.

  • label encoding, one-hot encoding 시 test 데이터셋 활용하여 encoder를 fit하는 경우
  • data scaling 적용 시 test 데이터셋 활용하여 scaler를 fit하는 경우
  • pandas의 get_dummies() 함수를 test 데이터셋에 적용하는 경우
  • test 데이터셋의 결측치 처리 시 test 데이터셋의 통계 값 활용
  • test 데이터셋을 EDA하여 얻은 인사이트를 통해 학습에 활용하는 경우
  • test 데이터셋을 학습 과정에 사용하는 모든 행위 (test 데이터셋은 추론에만 활용되어야 합니다.)
  • test 데이터셋의 데이터 개수 정보를 활용하는 경우 (실제 test 데이터셋은 몇개가 입력으로 들어올 지 모르기 때문)
  • 위 예시 외에도 test 데이터셋이 모델 학습에 활용되는 경우엔 Data leakage에 해당됩니다.


로그인이 필요합니다
0 / 1000
Omin_
2023.06.03 15:43

지금 신청기간 아닌가요? 신청이 안 돼서요!

도비콘
2023.06.03 17:27

Omin_ 님 안녕하세요.

주말에도 관심을 가져 주셔서 감사합니다.
네 지금은 신청기간이 아닙니다. 조금 더 기다려 주세요.

데이콘팀 드림.
감사합니다.^^

DACON.GM
2023.06.05 12:12

안녕하세요 Omin_님,
대회 참가 신청은 팀을 구성하여 팀장이 
본인 대학의 참가 접수 담당자 (대회 담장자)에게 참가 신청 해야합니다.
감사합니다.

동생공주님.
2023.07.03 09:22

대회 규칙 관련 문의 드립니다.
대회 규정 상 외부 데이터 사용이 불가한데, 혹시 자체적으로 데이터를 구축해서 학습에 사용하는 것은 대회 규정에 어긋나는 것인지 궁금합니다.

DACON.GM
2023.07.03 09:24

안녕하세요 hbp001님,
허용 가능한 범위는 학습 이미지로부터 새롭게 학습시킨 이미지 생성 모델을 활용하는 것 또는 일반적인 Augmentation 기법을 통한 증강입니다.
이외 대회 제공 데이터가 아닌 다른 외부 데이터를 사용하는 것은 불가능합니다.
감사합니다.

동생공주님.
2023.07.03 10:11

생성 모델은 대회 참가자 측에서 새롭게 학습을 시켜야 하나요? 아니면 pretrain weight 사용이 가능한가요?

DACON.GM
2023.07.03 10:14

규칙에 명시된 것과 같이 
법적 제약이 없으며 논문으로 공개된 베이스의 사전 학습 모델(Pre-trained Model)은 사용 가능합니다.

2023.07.03 15:54

대회 심사기준에 있어 문의드립니다.
2차 평가의 모델 성능 점수가 1차 평가에서의 결과 점수가 환산 되어 50% 반영된다고 안내 되어 있는데, 1차 평가에서 Private에 따른 점수 환산이 어떤 방식으로 계산되어 최종 평가에 반영되는지 알고 싶습니다.

DACON.GM
2023.07.03 16:01

안녕하세요 ahnheejin님,
정량 평가의 환산 점수 공식은 데이콘 모든 대회에서 사용되는 방식과 동일합니다.
50 * ((대상 팀의 Private 점수)^N / (전체 Private 최고 점수)^N)와 같으며 N은 비공개로 진행됩니다.
감사합니다.

Ldoun
2023.07.03 22:11

대회 규칙으로 "단, Test Dataset이 포함된 사전 학습 모델 사용 불가" 다음과 같은 규칙이 존재합니다.
자체적으로 해당 사항을 확인하기 위해 제공해주시는 데이터 셋 이름 공유해주실 수 있나요?

DACON.GM
2023.07.04 09:06

안녕하세요 Ldoun님,
dacon@dacon.io로 개별 문의 부탁드립니다.
본인이 사용하고자하는 모델과 출처를 기재해주시면 확인 가능합니다.
감사합니다.

stella0831
2023.07.05 20:06

안녕하세요 대회 관련해서 몇 가지 문의드릴 사항이 있습니다.

1. gpu 환경에 대한 제한이 기재되어있지 않아있는데 gpu 환경에 제약이 있는지 궁금합니다. 
2. 전문가 심사 점수 항목 중 적용 가능성 항목에 실제 현업에서의 적용 가능성을 평가하는데 여기에 사용한 gpu 환경도 같이 평가 요소가 될 수 있는지도 궁금합니다.
3. train 데이터를 보면 이미지에는 건물이 있지만 마스크 정보를 보면 건물이 있다고 표시되어있지 않은 경우, 건물 전체가 마스킹 되어있지 않고 일부만 마스킹 되어있는 마스크 정보들이 다수 존재합니다. 이를 직접 마스킹 처리를 해도 되는지가 궁금합니다. 

감사합니다.

DACON.GM
2023.07.06 13:07

안녕하세요 stella0831님,
문의주신 내용에 대한 답변입니다.
1. GPU 환경 제약은 없습니다.
2. 해당 평가 항목과 개발 GPU 환경은 크게 관련이 없으나, 평가 모델의 추론 방식, 추론에 필요한 리소스 등을 고려하여 '이 모델이 정말 현실에서 구동이 가능한 모델인가?' 등의 관점으로 평가되는 항목입니다. 즉 만약 비슷한 점수 대의 평가 대상팀이 있다면, 해당 항목에 대해 유효한 기법을 적용한 팀과 그렇지 않고 단순히 모델 성능만 고려한 팀 중 전자의 팀이 유리할 수 있는 평가 항목입니다.
3. 학습 데이터에 한하여 가능합니다.
감사합니다.

stella0831
2023.07.06 16:28

3번 질문에 관해 재질문드립니다.
직접 마스킹을 하는 과정에서 알고리즘을 구현해서 마스킹을 해야하는 것인지 알고리즘 구현 없이 사람이 직접 마스킹을 해도 되는지 궁금합니다.

DACON.GM
2023.07.06 16:29

학습 데이터에 한하여서는 직접 수작업으로 어노테이션을 추가적으로 진행해도 문제없습니다.
단, 추론 데이터(테스트 데이터)에 대해서는 수작업으로 어노테이션을 적용한 마스크를 추론하는 경우 부정행위('수기로 예측한 결과')로 간주됩니다.

stella0831
2023.07.07 13:16

추가적인 질문이 있어 문의드립니다.
GPU 환경에 제약이 없다고 들었는데 그럼 검증할 때 GPU 환경을 알 수 있을까요?

DACON.GM
2023.07.07 13:49

NVIDIA GeForce RTX 3090 x4 / Ubuntu 18.04.6 LTS (64bit)
Tesla V100-PCIE-32GB x2 / Ubuntu 16.04.6 LTS (64bit)
입니다.

2023.07.06 16:49

대회 규칙에 있어 문의 드립니다.
1. 발표 평가가 공개/비공개로 진행되는지 혹은 다른 방식으로 진행되는지 여쭤보고 싶습니다.
2. 대회종료후 팀별로 코드 공개가 필수적인 것인지 질문 드립니다.

DACON.GM
2023.07.06 16:56

안녕하세요 ahnheejin님,
문의주신 내용에 대한 답변입니다.
1. 발표 평가는 본인 팀의 발표 평가에만 참여할 수 있습니다. 즉 본인 팀과 심사위원단만 참여하여 진행됩니다. 발표 평가 대상자는 Private 상위 25팀만 자격이 주어집니다.
2. 2차 평가 대상자는 요구하는 제출파일(코드 포함)을 데이콘에 필수로 제출해야하며, 이외 대회 종료 후 코드 공유는 모든 팀이 자유롭게 진행할 수 있습니다.
대회 기간 중 코드 공유는 데이콘 플랫폼의 코드 공유 게시판 내에서만 가능합니다.
감사합니다.

uinone
2023.07.06 17:18

삭제된 댓글입니다

won2080
2023.07.11 22:08

삭제된 댓글입니다

cottonlove
2023.07.12 14:42

안녕하세요. validation dataset으로 외부 데이터를 사용하는 것은 가능할까요?

DACON.GM
2023.07.12 15:05

안녕하세요 cottonlove님,
validation 데이터셋 구축 역시, 제공드린 학습 데이터 내에서만 가능합니다.
외부데이터는 사용 불가능합니다.
감사합니다.