제2회 KRX 주식 투자 알고리즘 경진대회

알고리즘 | 정형 | 시계열 | 포트폴리오 구성 | 금융 | 샤프 지수

상금 : 5,000 만원
1,323명 마감

마감

대회안내 데이터 코드 공유 토크 리더보드

제출

샤프지수 1.0 넘으면 납치되나요?

검은짱돌의계략

2023.07.18 17:21 3,052 조회

종종 리더보드에 평가지표가 1.0이 넘으시는 분들이 있는데

하룻밤 지나면 사라지는 이유가 궁금합니다.

미래 데이터를 사용하거나 다른 부정행위 때문인가요?

그렇다면 1.0 넘는건 무조건 look-ahead bias 때문이라고 보시는건가요?

아니면

'너 나하고 일 하나 같이 하자' 와 같은 경우 인가요?

댓글 9개

로그인이 필요합니다

comment

0 / 1000

NN_is_all_you_need

2023.07.18 17:30

치팅 적발이 되었으니까 그렇지 않을까요? 아니면 치팅 검증에 응하지 않고 잠수탔거나?
이 대회같은 경우에 쉽게 범할 수 있는 치팅이 Public 기간 데이터를 끌고와서 활용한 경우일듯싶네요 (미래 데이터 사용)

검은짱돌의계략

2023.07.18 17:40

미래데이터를 '학습'에 사용하는건 부정행위지만, 검증에 사용하는것도 안될까요? 있으면 있는데로 없으면 없는데로..

NN_is_all_you_need

2023.07.18 17:49

대회 테스트데이터셋의 Ground-Truth를 외부에서 얻어와서 검증에 활용한다고 생각하시면 명백한 치팅에 해당하겠죠
혹은 제출하지 않고도 점수를 가늠하기위한 목적이여도 제출횟수에 대한 형평성에 어긋나니까 치팅일 거 같습니다

검은짱돌의계략

2023.07.18 19:28

그렇군요. 감사합니다

홍짜장

2023.07.18 17:46

종종 private 직전까지 숨기시는..? 분들도 보긴 했어요

보글

2023.07.20 21:32

퍼블릭은 아무것도 하지말고 sample_submission.csv 만 제출하고 숨기는게 대회 위험을 피하는 방법이라는 생각이 드네요.

보글

2023.07.18 22:47

검증 같은건 없는것 같고 그냥 삭제하시네요.
샤프지수 1이상이면 무조건 치팅으로 보고있는것 같습니다.
(수정) 특정 샤프지수 이상이면 검증하라고 메일 날라오네요. 스팸메일함에 들어가 있어 확인이 안됐었네요.

DACON.SeungYoon

2023.07.18 18:10

안녕하세요, 보글 님
대회 규정 위반 의혹이 존재하는 팀에게는 메일을 통해 별도 안내를 드리고 있습니다.
이는 대회 관련 문의의 리더보드 항목을 참고하시기 바랍니다. (DAKER! 대회 관련 문의 - 리더보드 점수)
https://dacon.io/competitions/official/236117/talkboard/408712?page=1&dtype=recent
좋지 않은 소식을 전해드리게 되어 매우 유감스럽게 생각하며,
메일 확인하시고 기한까지 회신 부탁드립니다.
감사합니다.