FSI AIxData Challenge 2024 : 생성 AI

알고리즘 | 금융보안원 | 생성형 AI | 생성 | 정형 | 분류 | Macro F1 Score | TCAP

  • moneyIcon 상금 1,700만 원
  • 605명 마감

 

평가지표 관련 문의

2024.08.18 16:29 1,151 조회

안녕하세요

대회규칙에 대한 평가지표중

  • Score = 0.7 x Macro F1 Score + 0.3 x (1 - TCAP)

Macro F1 Score는 (분류모델 정확성(35%), 생성모델 유용성(35%))  을 반영한다고 기재되어있는데

이에 대한 구체적인 산식이 없어서 문의드립니다.


특히 clf_submission.csv 를 통해 어떤방식으로 생성모델 유용성를 측정하는지 문의드립니다.


로그인이 필요합니다
0 / 1000
DACON.GM
2024.08.19 08:56

Macro F1 Score로 측정합니다.