분석시각화 대회 코드 공유 게시물은
내용 확인 후
좋아요(투표) 가능합니다.
농업 환경 변화에 따른 작물 병해 진단 AI 경진대회
CV와 LB의 acc 관련
Fold 1, score: 0.9430447602411901 100%|██████████| 1623/1623 [20:31<00:00, 1.32it/s] Fold 2, score: 0.9457411652139817 100%|██████████| 1623/1623 [20:07<00:00, 1.34it/s] Fold 3, score: 0.9604408609815994 100%|██████████| 1623/1623 [20:03<00:00, 1.35it/s] Fold 4, score: 0.9529212395312482 100%|██████████| 1623/1623 [19:49<00:00, 1.36it/s] Fold 5, score: 0.968016424903563 100%|██████████| 1623/1623 [19:49<00:00, 1.36it/s] Average Score is 0.9540328901743165
인데, LB는 94.7정도 뜨네요.
각각의 single-model은 93~94 안이구요.
확실한건, k-fold쓰는 게 좋아보이긴 합니다. 다만, LB 는 fold에서의 Minimum + ~0.5정도 뜨는 것 같아요.
다만, 저는 TTA x1을 쓰고 있는데, x3, x5쓰면 성능향상이 있을 것 같으면서도, 속도 측면에서는 잘 모르겠네요.. ㅎㅎㅎ
제 LB에 나와있는거는 5-fold를 위 모델이 아닌 다른 3 개의 모델로 돌린건데, 속도는 포기하더라도 성능을 올리고 싶다! 하시면 시도해보셔도 좋을 것 같아요!
성능이 꽤나 많이 오르더라구요..!
LB가 무엇의 줄임말인가요? ㅎㅎ lower bound 인가요?
Leaderboard의 줄임말로, 리더보드 점수라고 생각하시면 될 것 같습니다 :)
아하~ 빠른 답변 감사합니다!
혹시 k-fold를 어떻게 사용했는지 팁이 있을까요?
Stratified KFold 사용 중입니당
데이콘(주) | 대표 김국진 | 699-81-01021
통신판매업 신고번호: 제 2021-서울영등포-1704호
서울특별시 영등포구 은행로 3 익스콘벤처타워 901호
이메일 dacon@dacon.io | 전화번호: 070-4102-0545
Copyright ⓒ DACON Inc. All rights reserved
오오.. 감사합니다 이번 대회로 많이 배워가네요