평가산식에 대한 질문

2024 Samsung AI Challenge : Black-box Optimization

평가산식에 대한 질문

2024.08.01 13:10 2,014 Views

주어진 입력 변수 x_0부터 x_10까지의 값을 통해 예측된 타겟 변수 y의 값 중에서 상위 33%를 찾아내고, 이 예측된 상위 33%의 데이터 중 실제 상위 25%에 해당하는 데이터가 얼마나 포함되어 있는지를 측정하고 평가합니다.

이라고 쓰여있는데 여기서

상위 33%는 y의 값 중에서 가장 큰 33%를 의미하는 것일까요?
비슷한 맥락으로 실제 상위 25%도 값이 가장 큰 25%일까요?

감사합니다!!

3 Comments

comment

0 / 1000

DACON.GM

2024.08.01 13:14

네 맞습니다. 예측한 y 값 중에서 값이 큰 33%입니다.

bbeat2782

2024.08.01 13:15

중간에 글을 한번 수정해서 질문 하나가 더 있습니다. 그렇다면 실제 상위 25%도 같은 맥락으로 이해하면 될까요? 감사합니다!

DACON.GM

2024.08.01 13:19

네. Test 데이터 샘플에 대한 실제 y (Ground-Truth) 값들 중 값이 큰 상위 25% 샘플들입니다.
즉, 본인이 Test 데이터 샘플에 대해 예측한 y (Prediction) 값들 중 값이 큰 상위 33% 샘플이 실제 y (Ground-Truth) 값들 중 상위 25% 샘플에 얼마나 해당하는 지 Recall을 계산하여 평가합니다.

📣 The comment input field has been moved to the top of the comment list!

List

서버쪽 데이터를 받아와서 Type Animation을 적용하려 하는데 개행이 안됩니다.

Competition - 새싹 해커톤 : 생성 AI 활용

Current

평가산식에 대한 질문

Competition - 2024 Samsung AI Challenge : Black-box Optimization

Likes 7