Dacon Monthly Visual Question Answering AI Challenge

Algorithm | Multi-Modal | NLP | CV | VQA | Accuracy

Prize : 인증서
2023.07.10 ~ 2023.08.07 10:00 + Google Calendar
642 Users Completed

Practice

Overview Data Code (share) Talk Leaderboard

Submission

[Private 3위, 0.62888] BLIP hard voting

태형이

2023.08.13 23:24 2,252 Views language

안녕하세요 :)

BLIP (blip-itm-base-coco) 모델을 사용했습니다.

대회 기간 동안 ViLT, BLIP, GIT, BLIP-2 모델에 대해 논문을 읽어보고 구현했습니다.
추후 시간적 여유가 있을 때 공유할 수 있도록 노력하겠습니다.

* single model
- BLIP (seed 826) / pl: 0.58717, pr: 0.58967
- GIT (git-large) / pl: 0.55695, pr: 0.56271
- GIT (git-large) / pl: 0.55843, pr: 0.56483

* ensemble model (hard voting)
- BLIP (seed 0~8) / pl: 0.61352, pr: 0.62084
- BLIP (seed 0~8, 120, 415, 816) / pl: 0.61698 pr: 0.62235
- BLIP (seed 0~8, 120, 415, 816, 1005, 1011) / pl: 0.61970 pr: 0.62327
- BLIP (seed 0~8, 120, 415, 816, 1005, 1011) + GIT (git-large, git-large-r) / pl: 0.62489, pr:0.62856

A100(40GB)을 사용하여 학습했습니다.

감사합니다.