카메라 이미지 품질 향상 AI 경진대회

다들 TTA 잘 되시나요?

2021.07.22 14:10 2,033 Views

보통 이미지 대회에서 가장 많이 사용하는게 TTA 인데, 저는 이번 대회에서 TTA가 잘 안먹히더라구요.

다른분들도 비슷한 상황인지 궁금해서 질문드렸습니다.

로그인이 필요합니다
0 / 1000
딥러닝잘하고싶다
2021.07.22 14:21

저도 현재 실험까진 거의 차이가 없더라고요.. 추론 속도 대비 이점이 크지 않아서 저도 고민중입니다.

TEAM-EDA
2021.07.22 14:37

저는 차이가 없는 정도가 아니라 훨씬 떨어져가지고, 뭐가 문제인지를 모르겠습니다 ㅜㅜ

JJA
2021.07.22 14:26

넵 저도 진행해봤으나 유의미하진 않았습니다. 다양한 augmentation을 적용하고 실험해봐야할거같습니다.

TEAM-EDA
2021.07.22 14:38

다들 비슷하군요 ㅠㅠ 이게 어떤 의미때매 유의미하지 않은지 모르겠더라구요. 이런 경우 거의 처음봐가지고 

Barcelona
2021.07.24 00:11

저의 경우에도 TTA 수행시에 스코어가 0.2정도 떨어지네요. 학습시에도 동일한 Augmentation이 들어가는데도 떨어지는게 좀 이상하네요

TEAM-EDA
2021.07.24 00:17

저는 5 정도가 떨어지는 것 같습니다. tta를 더 심하게 하면 할 수록 더 안좋아지는? 미스테리입니다. ㅜㅜ

최정명
2021.07.24 01:20

학습시 적용했던 augmentation만을 TTA하셨나요?

TEAM-EDA
2021.07.24 01:24

네네. 두가지 모두 실험해봤는데 잘 안되는 것 같습니다. 정명님네 쪽은 TTA 잘 되시나요? 

최정명
2021.07.24 01:47

저도 성능이 잘 안나왔습니다.

cv에서는 어떻게 나오시나요?
저는 vertical, horizontal flip 해봤을 때 cv에서도 성능이 좀 떨어져서 나오더라고요. 그래서 현재는 augmentation은 적용을 안 하고 있습니다ㅠ
만약 운좋게 2차 평가를 가게 되면 추론 시간도 신경을 써야하니 TTA가 만약 좋은 성능을 낸다 하더라도 속도와 PSNR의 trade off도 고려 해봐야할 것 같기도 합니다..

TEAM-EDA
2021.07.24 02:01

TTA가 그냥 CV도 그렇고 LB도 그렇고 박살을 내더라구요 ㅠㅠ 경량화 평가가 어떻게 되는지 모르겠어가지고 그것도 문제네요