[카테고리:] Paper Review

Introduction  이번 논문은 Transformer를 Image Restoration 분야에 성공적으로 적용시킨 논문이다.  Image Restoration 분야에서 Transformer를 쓰기 힘들었던 이유 중에 하나는 self-attention의 computation 양 때문이었다. 특히 attention이 이미지의 resolution의 제곱에 비례해서 computation이 증가하기 때문에 비교적 큰 resolution을 다루는 restoration 분야 특성상 transformer를 적용하기 더 어려웠다. 이 논문에서는 attention을 조금 변형시켜 spatial dimension에서 적용하지 않고 channel dimension에 적용함으로써…

간단하게 noise2noise와 noise2void 방식을 정리해보려고 한다.각각 논문 제목은 아래와 같다. “Noise2Noise: Learning Image Restoration without Clean Data” (2018 ICML)“Noise2Void – Learning Denoising from Single Noisy Images” (2019 CVPR)  기본적으로 딥러닝을 이용해 Denoising을 학습시킬 때는 아래와 같이 noisy image와 clean image를 이용한다. 이런 noisy와 clean 이미지의 pair를 얻는것이 쉽지 않기 때문에 이런 pair 데이터 없이도 네트워크를 training시키기…