카메라 이미지 품질 향상 AI 경진대회

이미지 patch 형성 후 이어 붙였을 때 격자무늬..

2021.07.26 15:08 3,730 조회

안녕하세요 날도 많이 더운데 다들 수고가 많으십니다.


현재 GAN 계열 모델을 참고하여 모델 테스트 중인데 격자무늬가 너무 선명하게 보이는 이미지들이 생겨나네요.


이번 대회에 다른 분들께서 올려주신 게시물 참고해보니 격자무늬가 생겨나는 건 patch 생성 후 이어 붙이면서 이웃한 patch간의 픽셀 차이로 인해 발생하는 문제라고 파악할 수 있었습니다.


그런데 저와 같은 문제를 겪고 계신 분들 중에서 어떤 아이디어를 활용하여 격자무늬를 지우고자 하셨는지 궁금하네요.

자세하게는 아니더라도 기본적인 아이디어 공유가 가능할까요?


아래 이미지는 테스트 데이터 20019에서 생성한 output입니다. 이 이미지 외에 다른 이미지들을 살펴보아도 주로 뒷배경에서의 격자무늬가 선명한 편이네요.

로그인이 필요합니다
0 / 1000
INVI
2021.07.26 15:20

저는 stride를 조절해가며 겹치는 부분이 있도록 아웃풋을 뽑았습니다.

test inference 시간은 늘어나지만 확실히 겹치는 부분이 많을 수록 격자가 줄어듭니다.

라미라미
2021.07.26 15:19

저는 patch size 256x256 /  stride 128로 두고 했는데
stride를 더 줄여서 쪼개진 이미지 수를 더 늘린 다음에 합치는 편이 더 나을까요 그러면??
INVI님은 patch size와 stride를 어느정도로 두고 하셨나요??

INVI
2021.07.26 15:28

네, stride를 줄여서 해보시는 걸 추천합니다.
저는 고정된 patch size와 stride는 사용하지 않고 다양하게 실험해보고 있어요!

라미라미
2021.07.26 15:28

그렇군요 답변 감사드립니다.

rlawjdghek
2021.07.31 16:01

tta나 앙상블은 효과가 어떤가요???

라미라미
2021.08.02 17:48

저는 시간이 오래 걸릴 것이 우려되어 적용해보지는 않았습니다.

양치기
2021.08.02 18:06

격자의 경계선 라인에 blur 처리를 하면 일단 경계선은 어느정도 누그러뜨릴 수 있습니다.

라미라미
2021.08.02 18:07

감사합니다. 나중에 비슷한 연구 진행할 때 적용해보면 좋을 듯하네요!