2024 Samsung AI Challenge : Black-box Optimization

Algorithm | Recruit | Tabular | Optimization | Recall

  • moneyIcon Prize : 21,000,000 KRW
  • 994 Users Completed

 

평가산식에 대한 질문

2024.08.01 13:10 2,015 Views

주어진 입력 변수 x_0​부터 x_10​까지의 값을 통해 예측된 타겟 변수 y의 값 중에서 상위 33%를 찾아내고, 이 예측된 상위 33%의 데이터 중 실제 상위 25%에 해당하는 데이터가 얼마나 포함되어 있는지를 측정하고 평가합니다.


이라고 쓰여있는데 여기서

  1. 상위 33%는 y의 값 중에서 가장 큰 33%를 의미하는 것일까요?
  2. 비슷한 맥락으로 실제 상위 25%도 값이 가장 큰 25%일까요?


감사합니다!!

Login Required
0 / 1000
DACON.GM
2024.08.01 13:14

네 맞습니다. 예측한 y 값 중에서 값이 큰 33%입니다.

bbeat2782
2024.08.01 13:15

중간에 글을 한번 수정해서 질문 하나가 더 있습니다. 그렇다면 실제 상위 25%도 같은 맥락으로 이해하면 될까요? 감사합니다!

DACON.GM
2024.08.01 13:19

네. Test 데이터 샘플에 대한 실제 y (Ground-Truth) 값들 중 값이 큰 상위 25% 샘플들입니다.
즉, 본인이 Test 데이터 샘플에 대해 예측한 y (Prediction) 값들 중 값이 큰 상위 33% 샘플이 실제 y (Ground-Truth) 값들 중 상위 25% 샘플에 얼마나 해당하는 지 Recall을 계산하여 평가합니다.

Previous
데이터 추가 제공으로 인한 변경 사항 안내 (8월 8일 오전 11시 적용 완료)
Competition - 2024 Samsung AI Challenge : Black-box Optimization
Likes 15
Views 1,330
Comments 0
일 년 전
Current
평가산식에 대한 질문
Competition - 2024 Samsung AI Challenge : Black-box Optimization
Likes 7
Views 2,015
Comments 3
일 년 전
Next
No Next Post