ビデオフレーム補間、つまり時間内の新しいビューの合成は、ますます人気のある研究の方向性であり、多くの新しい論文が最先端技術をさらに進歩させています。ただし、新しいメソッドにはそれぞれ、補間の品質に影響を与える多数の変数が付属しているため、このタスクにとって実際に何が重要であるかを判断するのは難しい場合があります。この作業では、やや意外なことに、低レベルの微妙な改善によって、より古くて単純なアプローチ、つまり適応型の分離可能な畳み込みで最先端に近い結果を達成できることを示します。そうすることで、フレーム補間品質を改善するための直感的で効果的な手法をいくつか提案します。これは、バースト画像のノイズ除去、ジョイント画像フィルタリング、ビデオ予測など、適応畳み込みの他の関連アプリケーションにも可能性があります。
Video frame interpolation, the synthesis of novel views in time, is an increasingly popular research direction with many new papers further advancing the state of the art. But as each new method comes with a host of variables that affect the interpolation quality, it can be hard to tell what is actually important for this task. In this work, we show, somewhat surprisingly, that it is possible to achieve near state-of-the-art results with an older, simpler approach, namely adaptive separable convolutions, by a subtle set of low level improvements. In doing so, we propose a number of intuitive but effective techniques to improve the frame interpolation quality, which also have the potential to other related applications of adaptive convolutions such as burst image denoising, joint image filtering, or video prediction.