https://arxiv.org/abs/2104.14107
Decoupled Dynamic Filter Networks (Jingkai Zhou, Varun Jampani, Zhixiong Pi, Qiong Liu, Ming-Hsuan Yang)
attention의 부상과 더불어 convolution kernel을 input dependent하게 만들고 싶다는 욕망도 부상하는군요. 이런 형태의 결과 중에서는 꽤 괜찮아보이는 결과네요. 물론 cuda kernel을 만들어야 쓸만하다는 것이 늘 문제이긴 합니다.
#convolution