FSI AIxData Challenge 2024 : 생성 AI

평가지표 관련 문의

2024.08.18 16:29 754 조회

안녕하세요

대회규칙에 대한 평가지표중

  • Score = 0.7 x Macro F1 Score + 0.3 x (1 - TCAP)

Macro F1 Score는 (분류모델 정확성(35%), 생성모델 유용성(35%))  을 반영한다고 기재되어있는데

이에 대한 구체적인 산식이 없어서 문의드립니다.


특히 clf_submission.csv 를 통해 어떤방식으로 생성모델 유용성를 측정하는지 문의드립니다.


로그인이 필요합니다
0 / 1000
DACON.GM
2024.08.19 08:56

Macro F1 Score로 측정합니다.