ゆるふわめも

ただのメモです。

動画のフレーム間の画像補完・アニメの中割り関係の論文のメモ

気になったので。 いつかやりたいけど。

中割り

アニメーションでいつくか原画が描かれ、その間の動きを表現するコマを補う画像 ・映像のこと。

論文

中割り

A filter based approach for inbetweening

www.youtube.com

ドワンゴの論文。バズったので有名。

動画のフレーム間の画像補完

最終的に行うことは同じ、フレーム間の画像の補完。 個人的には、アニメでのフレーム間の補完を行うための教師データはfpsが動画のタスクと比べて比較的小さい点が違うと考えている。

ドワンゴの論文には引用されていないものが多いので自分が根本的にタスクを勘違いしている可能性あり。

Optical Flow Guided TV-L1. Video Interpolation and Restoration

Multi-Level Video Frame Interpolation: Exploiting the Interaction Among Different Levels

Werlberger, Manuel, et al. “Optical Flow Guided TV-L1 Video Interpolation and Restoration.” EMMCVPR. 2011.

Deep multi-scale video prediction beyond mean square error

Phase-based frame interpolation for video

www.youtube.com

DeepMotion - A Convolutional Neural Network for Frame Interpolation

www.youtube.com

github.com

Video Frame Synthesis using Deep Voxel Flow

www.youtube.com

Video Frame Interpolation via Adaptive Separable Convolution

Long-Term Video Interpolation with Bidirectional Predictive Network