저도 max 3개까지 앙상블 고려중입니다.. ㅎ

저희도 고민중입니다ㅠㅠ 추론속도를 손해보고 점수를 더 끌어올릴지,
 PSNR 성능은 떨어지지만 훨씬 빠른 솔루션 방식을 최종에 선택할지
 둘다 리스크가 존재해서 너무 고민입니다 ..

어느쪽을 손해보고 어느쪽을 선택했으면 그에따른 점수체계를 알아야 저희가 전략적으로 선택을 할텐데, 그부분이 없다는 점에서 그냥 도박을 하고 있다는 생각입니다.

예전 카카오 추천시스템에서는 (다양한 추천을 했는지 엔트로피 점수 <-> 추천 성능) 와 같은 점수를 리더보드에서 모두 표시해줬기 때문에, 다양한 추천을 하는대신 성능을 잃거나, 다양한 추천을 조금 포기하고 성능을 높이는 등 전략적인 선택이 가능했습니다

농담반 진담반으로, 그냥 주사위 돌려서 몇개 선택할지 정해야죠 뭐

차라리 20개 전체를 처리하는데 걸리는 시간을 구간별로 나누어서 점수를 미리 공지 했다면 그 구간에 맞춰서 전략이라도 짤 수 있었겠는데 아쉽네요.

앙상블 전략은 PSNR을 개선하는데 효과는 있지만 추론 시간은 말씀하신대로 약 2배 가까이 더 소요되죠.

참가자들은 2차평가를  받기위해 어떻게든 1차 평가 대상인 PSNR을 올려야 하니 추론시간은 제쳐두고 앙상블 전략을 도전하는 사람이 많을 수 있을 것 같습니다. 경쟁이 계속되면 어쩔 수 없이 앙상블 전략을 선택해야 될 수도 있죠. 점점 상위 점수 분들의 추론시간은 다같이 늘어나기만 하는 문제가 있을 수 있겠습니다.

하지만 무엇보다 싱글로 PSNR이 높은게 최고의 모델이겠지만요 어렵네요ㅠㅠ