Stable Videoでイラストレーションからの動画生成を試す

リアル系には非常に定評がある、Stable Video Diffusion (SVD) 1.1を利用できる「Stable Video」。リアル系の動画生成については「Stable VideoとMidjourneyを組合せて画像から動画を生成」で試行しましたが、今回は様々なイラストレーションで動画生成を試してみたいと思います。

イラストレーション

ズームインしていきますが、完全に絵が崩れてしまいました。イラストに関しては明らかに精度が落ちますね。

リアル寄りのイラスト

イラストよりは全体が保たれている形ですが、動画になった時点で顔のディティールが失われています。リアルな背景や、服装などは比較的原画を保っています。

アニメ風のイラスト

ある程度寄った画角なので作画は崩壊しませんでしたが、メインのイラストが一切動かない結果になりました。

まとめ

結論としては、イラストレーションの生成はまだ難しそうです。パラメーターの調整や入力画像の調整でなんとかなりそうな気もしますが、考え無しではなかなかむずかしそうです。今後の発展にも期待したいと思います。

Stable Video
https://www.stablevideo.com/